JP6547977B2 - 感情状態検出に基づいて電子デバイス上で推奨を提供するためのシステム及び方法 - Google Patents
感情状態検出に基づいて電子デバイス上で推奨を提供するためのシステム及び方法 Download PDFInfo
- Publication number
- JP6547977B2 JP6547977B2 JP2017170947A JP2017170947A JP6547977B2 JP 6547977 B2 JP6547977 B2 JP 6547977B2 JP 2017170947 A JP2017170947 A JP 2017170947A JP 2017170947 A JP2017170947 A JP 2017170947A JP 6547977 B2 JP6547977 B2 JP 6547977B2
- Authority
- JP
- Japan
- Prior art keywords
- electronic device
- emotional state
- user
- content item
- circuits
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000002996 emotional effect Effects 0.000 title claims description 333
- 238000000034 method Methods 0.000 title claims description 44
- 238000001514 detection method Methods 0.000 title claims description 35
- 230000007704 transition Effects 0.000 claims description 126
- 230000004044 response Effects 0.000 claims description 16
- 238000010801 machine learning Methods 0.000 claims description 11
- 230000008451 emotion Effects 0.000 description 76
- 238000004891 communication Methods 0.000 description 30
- 238000010586 diagram Methods 0.000 description 12
- 230000008859 change Effects 0.000 description 9
- 230000009471 action Effects 0.000 description 8
- 230000003542 behavioural effect Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 5
- 230000033001 locomotion Effects 0.000 description 4
- 238000012706 support-vector machine Methods 0.000 description 4
- 239000003826 tablet Substances 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000036541 health Effects 0.000 description 3
- 230000007774 longterm Effects 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000002040 relaxant effect Effects 0.000 description 3
- 230000035900 sweating Effects 0.000 description 3
- 208000019901 Anxiety disease Diseases 0.000 description 2
- 206010048909 Boredom Diseases 0.000 description 2
- 230000036506 anxiety Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 235000019577 caloric intake Nutrition 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 239000007943 implant Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003032 molecular docking Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- WVQBLGZPHOPPFO-LBPRGKRZSA-N (S)-metolachlor Chemical compound CCC1=CC=CC(C)=C1N([C@@H](C)COC)C(=O)CCl WVQBLGZPHOPPFO-LBPRGKRZSA-N 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000747 cardiac effect Effects 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000005358 geomagnetic field Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012417 linear regression Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007477 logistic regression Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 230000027758 ovulation cycle Effects 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000002106 pulse oximetry Methods 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0269—Targeted advertisements based on user profile or attribute
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0255—Targeted advertisements based on user history
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0261—Targeted advertisements based on user location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0282—Rating or review of business operators or products
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
- H04N21/4668—Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Strategic Management (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Entrepreneurship & Innovation (AREA)
- Databases & Information Systems (AREA)
- Game Theory and Decision Science (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Tourism & Hospitality (AREA)
- Computer Hardware Design (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Biomedical Technology (AREA)
- Dermatology (AREA)
- Neurology (AREA)
- Neurosurgery (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Computational Linguistics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
Description
なし。
102 第1電子デバイス
104 第2電子デバイス
112 ユーザ
114 ユーザに関連付けられた複数の感情状態
Claims (20)
- 電子デバイス内の1又は2以上の回路であって、
前記電子デバイス上でコンテンツ項目を視聴しているユーザであって、前記電子デバイスに関連付けられたユーザの第1感情状態から第2感情状態への感情状態の移行を検出し、
前記検出された移行中に視聴された前記コンテンツ項目の一部分を前記ユーザの前記第2感情状態に関連付け、
前記ユーザのアイデンティティ情報と前記検出された移行とに基づいて、該ユーザの前記第2感情状態に関連付けられてタグ付けされたコンテンツ項目をネットワークデバイスから取り出し、かつ
前記ユーザの前記感情状態の前記検出された移行と前記電子デバイスの現在位置とに応答して、前記取り出されたタグ付きコンテンツ項目に関連する製品又はサービスを推奨するアプリケーションを該電子デバイス上で起動する、
ように構成された前記1又は2以上の回路、
を含むことを特徴とする、推奨を提供するためのシステム。 - 前記第1感情状態及び前記第2感情状態は、平常、嬉しさ、悲しさ、怒り、軽蔑、恐怖、驚き、困惑、及び/又は優しさの感情状態のうちの1つに対応することを特徴とする請求項1に記載のシステム。
- 前記ネットワークデバイスは、サーバ、無線ネットワーク内で前記電子デバイスに接続した別の電子デバイス、及び/又はクラウドベースのサービスのうちの1つに対応することを特徴とする請求項1に記載のシステム。
- 前記1又は2以上の回路は、前記ユーザの前記感情状態の前記移行の前記検出のために、該ユーザに関連付けられた着用可能デバイス、前記電子デバイスの内蔵カメラ、該電子デバイス上のテキストベースの入力、及び/又は該電子デバイス上の音声ベースの入力のうちの1又は2以上からセンサデータを受信するように更に構成されることを特徴とする請求項1に記載のシステム。
- 前記1又は2以上の回路は、前記電子デバイス上で前記取り出されたタグ付きコンテンツ項目に基づいて前記製品又は前記サービスを検索するように更に構成されることを特徴とする請求項1に記載のシステム。
- 前記1又は2以上の回路は、前記ユーザの前記感情状態の前記検出された移行と前記ネットワークデバイス内で前記第2感情状態に関連付けられて最後にタグ付けされたコンテンツ項目とに基づいて前記電子デバイスのホーム画面インタフェースを動的にカスタマイズするように更に構成されることを特徴とする請求項1に記載のシステム。
- 電子デバイス内の1又は2以上の回路であって、
前記電子デバイス上でコンテンツ項目を視聴しているユーザの第1感情状態から第2感情状態への感情状態の移行を検出し、
前記検出された移行中に視聴された前記コンテンツ項目の一部分を前記ユーザの前記第2感情状態に関連付け、
前記第2感情状態への前記検出された移行の原因を該第2感情状態に関連付けられた前記コンテンツ項目の前記部分内で識別し、かつ
前記ユーザの前記感情状態の前記検出された移行と前記電子デバイスの現在位置とに応答して、前記識別された原因に基づいて製品又はサービスのための推奨を発生させる、
ように構成された前記1又は2以上の回路、
を含むことを特徴とする、推奨を提供するためのシステム。 - 前記コンテンツ項目の前記部分内の前記識別された原因は、該コンテンツ項目の該部分の画像フレーム、該画像フレーム内の物体、コンテキストのうちの1又は2以上に対応することを特徴とする請求項7に記載のシステム。
- 前記1又は2以上の回路は、前記電子デバイス上で前記コンテンツ項目の視聴中の前記ユーザの前記第2感情状態のレベルを決定するように更に構成され、
前記コンテンツ項目の前記部分は、前記決定されたレベルが閾値よりも高い時に前記第2感情状態に関連付けられる、
ことを特徴とする請求項7に記載のシステム。 - 前記1又は2以上の回路は、前記コンテンツ項目の前記部分内で前記識別された原因を、前記第2感情状態、前記ユーザのアイデンティティ情報、前記検出された移行のタイムスタンプ、及び/又は該第2感情状態の前記決定されたレベルのうちの1又は2以上にタグ付けするように更に構成されることを特徴とする請求項9に記載のシステム。
- 前記1又は2以上の回路は、前記第2感情状態に関連付けられて前記タグ付けされた原因に関連する製品又はサービスを前記推奨のために事前指定された検索エンジンを用いてリアルタイム又はほぼリアルタイムで検索するように更に構成されることを特徴とする請求項10に記載のシステム。
- 前記1又は2以上の回路は、前記コンテンツ項目の前記部分内で前記タグ付けされた原因を前記電子デバイスに通信的に結合されたサーバ又はネットワークデバイスに通信するように更に構成されることを特徴とする請求項10に記載のシステム。
- 前記1又は2以上の回路は、前記電子デバイス又は該電子デバイスに通信的に結合された別の電子デバイス上で前記製品又は前記サービスに関して前記発生された推奨の表示を制御するように更に構成されることを特徴とする請求項7に記載のシステム。
- 前記1又は2以上の回路は、前記発生された推奨を表示するように別の電子デバイスに該他の電子デバイスのホーム画面インタフェースをアンロックする通知を通信するように更に構成されることを特徴とする請求項7に記載のシステム。
- 前記1又は2以上の回路は、前記発生された推奨を、該発生された推奨の使用パターンに関連付けられた機械学習に基づいて更新するように更に構成されることを特徴とする請求項7に記載のシステム。
- 推奨を提供する方法であって、
電子デバイスの1又は2以上の回路により、前記電子デバイス上でコンテンツ項目を視聴しているユーザであって、該電子デバイスに関連付けられたユーザの第1感情状態から第2感情状態への感情状態の移行を検出する段階と、
前記1又は2以上の回路により、前記検出された移行中に視聴された前記コンテンツ項目の一部分を前記ユーザの前記第2感情状態に関連付け、
前記1又は2以上の回路により、前記ユーザの前記第2感情状態に関連付けられてタグ付けされたコンテンツ項目を該ユーザのアイデンティティ情報と前記検出された移行とに基づいてネットワークデバイスから取り出す段階と、
前記1又は2以上の回路により、前記ユーザの前記感情状態の前記検出された移行と前記電子デバイスの現在位置とに応答して、前記取り出されたタグ付きコンテンツ項目に関連する製品又はサービスを推奨するアプリケーションを該電子デバイス上で起動する段階と、
を含むことを特徴とする方法。 - 前記1又は2以上の回路により、前記電子デバイス上で前記取り出された前記タグ付きコンテンツ項目に基づいて前記製品又は前記サービスを検索する段階を更に含むことを特徴とする請求項16に記載の方法。
- 前記1又は2以上の回路により、前記ユーザの前記感情状態の前記検出された移行と前記ネットワークデバイス内で前記第2感情状態に関連付けられて最後にタグ付けされたコンテンツ項目とに基づいて前記電子デバイスのホーム画面インタフェースを動的にカスタマイズする段階を更に含むことを特徴とする請求項16に記載の方法。
- 推奨を提供する方法であって、
電子デバイスの1又は2以上の回路により、該電子デバイス上でコンテンツ項目を視聴しているユーザの第1感情状態から第2感情状態への感情状態の移行を検出する段階と、 前記1又は2以上の回路により、前記検出された移行中に視聴された前記コンテンツ項目の一部分を前記ユーザの前記第2感情状態に関連付ける段階と、
前記1又は2以上の回路により、前記第2感情状態への前記検出された移行の原因を該第2感情状態に関連付けられた前記コンテンツ項目の前記部分内で識別する段階と、
前記1又は2以上の回路により、前記ユーザの前記感情状態の前記検出された移行と前記電子デバイスの現在位置とに応答して、前記識別された原因に基づいて製品又はサービスのための推奨を発生させる段階と、
を含むことを特徴とする方法。 - 前記コンテンツ項目の前記部分内で前記識別された原因は、該コンテンツ項目の該部分の画像フレーム、該画像フレーム内の物体、コンテキストのうちの1又は2以上に対応することを特徴とする請求項19に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/260,502 US11049147B2 (en) | 2016-09-09 | 2016-09-09 | System and method for providing recommendation on an electronic device based on emotional state detection |
US15/260,502 | 2016-09-09 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018041460A JP2018041460A (ja) | 2018-03-15 |
JP6547977B2 true JP6547977B2 (ja) | 2019-07-24 |
Family
ID=59846373
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017170947A Active JP6547977B2 (ja) | 2016-09-09 | 2017-09-06 | 感情状態検出に基づいて電子デバイス上で推奨を提供するためのシステム及び方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11049147B2 (ja) |
EP (1) | EP3293691A1 (ja) |
JP (1) | JP6547977B2 (ja) |
KR (1) | KR102013493B1 (ja) |
CN (1) | CN107807947B (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10960173B2 (en) | 2018-11-02 | 2021-03-30 | Sony Corporation | Recommendation based on dominant emotion using user-specific baseline emotion and emotion analysis |
Families Citing this family (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3300655A1 (en) * | 2016-09-28 | 2018-04-04 | Stichting IMEC Nederland | A method and system for emotion-triggered capturing of audio and/or image data |
JP6653398B2 (ja) * | 2016-12-28 | 2020-02-26 | 本田技研工業株式会社 | 情報提供システム |
DE102017203570A1 (de) * | 2017-03-06 | 2018-09-06 | Volkswagen Aktiengesellschaft | Verfahren und vorrichtung zur darstellung von empfohlenen bedienhandlungen eines vorschlagssystems und interaktion mit dem vorschlagssystem |
US10790053B2 (en) * | 2017-04-18 | 2020-09-29 | International Business Machines Corporation | Appetite improvement system through memory association |
KR102132407B1 (ko) * | 2017-11-22 | 2020-07-10 | 인하대학교 산학협력단 | 점진적 딥러닝 학습을 이용한 적응적 영상 인식 기반 감성 추정 방법 및 장치 |
CN112055865B (zh) * | 2018-03-15 | 2024-08-09 | Arm有限公司 | 用于行为和/或生物状态处理的系统、装置和/或过程 |
US11259729B2 (en) * | 2018-03-15 | 2022-03-01 | Arm Ltd. | Systems, devices, and/or processes for behavioral and/or biological state processing |
CN108401129A (zh) * | 2018-03-22 | 2018-08-14 | 广东小天才科技有限公司 | 基于穿戴式设备的视频通话方法、装置、终端及存储介质 |
CN108647052B (zh) * | 2018-04-28 | 2020-12-01 | Oppo广东移动通信有限公司 | 应用程序预加载方法、装置、存储介质及终端 |
CN108616772B (zh) * | 2018-05-04 | 2020-10-30 | 维沃移动通信有限公司 | 一种弹幕显示方法、终端和服务器 |
CN108733429B (zh) * | 2018-05-16 | 2020-01-21 | Oppo广东移动通信有限公司 | 系统资源配置的调整方法、装置、存储介质及移动终端 |
CN108694619A (zh) * | 2018-06-20 | 2018-10-23 | 新华网股份有限公司 | 电影票房预测方法和系统 |
US11755905B2 (en) | 2018-06-22 | 2023-09-12 | Semiconductor Energy Laboratory Co., Ltd. | Data processing method, image display method, data processing device, and image display device |
CN108989887A (zh) * | 2018-07-17 | 2018-12-11 | 奇酷互联网络科技(深圳)有限公司 | 移动终端和推送视频的方法、装置 |
WO2020050862A1 (en) * | 2018-09-07 | 2020-03-12 | Hewlett-Packard Development Company, L.P. | Determining sentiments of customers and employees |
WO2020058944A1 (en) * | 2018-09-21 | 2020-03-26 | Curtis Steve | System and method for distributing revenue among users based on quantified and qualified emotional data |
CN110970113B (zh) * | 2018-09-30 | 2023-04-14 | 宁波方太厨具有限公司 | 基于用户情绪的智能菜谱推荐方法 |
CN109549624A (zh) * | 2018-11-04 | 2019-04-02 | 南京云思创智信息科技有限公司 | 一种基于深度学习的实时视频情感分析方法及系统 |
KR102688533B1 (ko) | 2018-12-07 | 2024-07-26 | 구글 엘엘씨 | 하나 이상의 컴퓨터 애플리케이션에서 사용 가능한 액션을 선택하고 사용자에게 제공하기 위한 시스템 및 방법 |
KR20200089957A (ko) * | 2019-01-18 | 2020-07-28 | 삼성전자주식회사 | 전자 장치 및 이의 제어 방법 |
US11933974B2 (en) * | 2019-02-22 | 2024-03-19 | Semiconductor Energy Laboratory Co., Ltd. | Glasses-type electronic device |
JP6611972B1 (ja) | 2019-03-05 | 2019-11-27 | 正通 亀井 | アドバイス提示システム |
JP7090573B2 (ja) * | 2019-03-15 | 2022-06-24 | ヤフー株式会社 | 提供装置、提供方法及び提供プログラム |
JP7139270B2 (ja) * | 2019-03-18 | 2022-09-20 | ヤフー株式会社 | 推定装置、推定方法及び推定プログラム |
CN110069991A (zh) * | 2019-03-18 | 2019-07-30 | 深圳壹账通智能科技有限公司 | 反馈信息确定方法、装置、电子设备及存储介质 |
WO2020222539A1 (en) | 2019-05-02 | 2020-11-05 | Samsung Electronics Co., Ltd. | Hub device, multi-device system including the hub device and plurality of devices, and method of operating the same |
KR102354964B1 (ko) * | 2019-10-11 | 2022-01-24 | 주식회사 케이티앤지 | 교체 가능한 카트리지를 추천하는 에어로졸 생성 장치 및 에어로졸 생성 시스템 |
CN110826436A (zh) * | 2019-10-23 | 2020-02-21 | 上海能塔智能科技有限公司 | 情绪数据传输及处理方法、装置、终端设备、云平台 |
CN111145912B (zh) * | 2019-12-23 | 2023-04-18 | 浙江大学 | 一种基于机器学习的个性化超促排卵方案的预测装置 |
CN111222044A (zh) * | 2019-12-31 | 2020-06-02 | 深圳Tcl数字技术有限公司 | 基于情绪感知的信息推荐方法、设备及存储介质 |
US11272314B2 (en) | 2020-01-07 | 2022-03-08 | Kyndryl, Inc. | Geofence selection and modification |
KR20220006926A (ko) * | 2020-07-09 | 2022-01-18 | 삼성전자주식회사 | 요약 비디오를 생성하는 디바이스 및 방법 |
RU2768551C1 (ru) * | 2020-10-07 | 2022-03-24 | Самсунг Электроникс Ко., Лтд. | Способ локального генерирования и представления потока обоев и вычислительное устройство, реализующее его |
KR20220054067A (ko) * | 2020-10-23 | 2022-05-02 | 삼성전자주식회사 | 전자 장치 및 서버를 포함하는 시스템, 및 그 시스템을 이용한 컨텐츠 추천 방법 |
CN112398952A (zh) * | 2020-12-09 | 2021-02-23 | 英华达(上海)科技有限公司 | 电子资源推送方法、系统、设备及存储介质 |
CN112667762B (zh) * | 2020-12-25 | 2023-04-25 | 贵州北斗空间信息技术有限公司 | 一种零编程快速构建gis系统的方法 |
CN113760388A (zh) * | 2021-02-08 | 2021-12-07 | 北京沃东天骏信息技术有限公司 | 一种信息处理方法、装置、电子设备和存储介质 |
WO2023073956A1 (ja) * | 2021-10-29 | 2023-05-04 | Vie Style株式会社 | プログラム、情報処理方法、及び情報処理装置 |
KR20230081026A (ko) * | 2021-11-30 | 2023-06-07 | 삼성전자주식회사 | 장애인을 위한 시청각 콘텐츠 제공 장치 및 방법 |
US12020560B2 (en) | 2021-11-30 | 2024-06-25 | Samsung Electronics Co., Ltd. | Device and method of providing audiovisual content for the disabled |
US11895368B2 (en) * | 2022-03-04 | 2024-02-06 | Humane, Inc. | Generating, storing, and presenting content based on a memory metric |
GB2617385A (en) * | 2022-04-07 | 2023-10-11 | Sony Interactive Entertainment Inc | Game launching system and method |
CN115375001A (zh) * | 2022-07-11 | 2022-11-22 | 重庆旅游云信息科技有限公司 | 一种用于景区的游客情绪评估方法及装置 |
CN117593058A (zh) * | 2023-12-05 | 2024-02-23 | 北京鸿途信达科技股份有限公司 | 基于情绪识别的广告匹配系统 |
Family Cites Families (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005032167A (ja) | 2003-07-11 | 2005-02-03 | Sony Corp | 情報検索装置、情報検索方法、情報検索システム、クライアント装置およびサーバ装置 |
JP4794846B2 (ja) | 2004-10-27 | 2011-10-19 | キヤノン株式会社 | 推定装置、及び推定方法 |
US7539533B2 (en) * | 2006-05-16 | 2009-05-26 | Bao Tran | Mesh network monitoring appliance |
US20080320037A1 (en) * | 2007-05-04 | 2008-12-25 | Macguire Sean Michael | System, method and apparatus for tagging and processing multimedia content with the physical/emotional states of authors and users |
JP5083033B2 (ja) | 2008-05-23 | 2012-11-28 | 株式会社豊田中央研究所 | 感情推定装置及びプログラム |
US10482333B1 (en) * | 2017-01-04 | 2019-11-19 | Affectiva, Inc. | Mental state analysis using blink rate within vehicles |
CN102404680B (zh) | 2010-09-09 | 2015-12-09 | 三星电子(中国)研发中心 | 基于位置识别的启动应用的方法以及使用该方法的手持设备 |
US20120143693A1 (en) * | 2010-12-02 | 2012-06-07 | Microsoft Corporation | Targeting Advertisements Based on Emotion |
US20130159228A1 (en) | 2011-12-16 | 2013-06-20 | Microsoft Corporation | Dynamic user experience adaptation and services provisioning |
JP5752070B2 (ja) | 2012-02-17 | 2015-07-22 | エヌ・ティ・ティ・コミュニケーションズ株式会社 | 関連情報表示システム、関連情報表示制御装置、端末装置、プログラム、及び関連情報表示方法 |
US20140324749A1 (en) * | 2012-03-21 | 2014-10-30 | Alexander Peters | Emotional intelligence engine for systems |
WO2013157015A2 (en) * | 2012-04-16 | 2013-10-24 | Chunilal Rathod Yogesh | A method and system for display dynamic & accessible actions with unique identifiers and activities. |
CN102929660A (zh) | 2012-10-09 | 2013-02-13 | 广东欧珀移动通信有限公司 | 一种终端设备心情主题的控制方法及其终端设备 |
US9378655B2 (en) * | 2012-12-03 | 2016-06-28 | Qualcomm Incorporated | Associating user emotion with electronic media |
CN103093752A (zh) | 2013-01-16 | 2013-05-08 | 华南理工大学 | 一种基于手机语音的情感分析方法及其系统 |
KR20140094336A (ko) | 2013-01-22 | 2014-07-30 | 삼성전자주식회사 | 사용자 감정 추출이 가능한 전자기기 및 전자기기의 사용자 감정 추출방법 |
US9015737B2 (en) | 2013-04-18 | 2015-04-21 | Microsoft Technology Licensing, Llc | Linked advertisements |
CN105339926A (zh) * | 2013-08-06 | 2016-02-17 | 英特尔公司 | 情绪相关的查询处理 |
US9264770B2 (en) | 2013-08-30 | 2016-02-16 | Rovi Guides, Inc. | Systems and methods for generating media asset representations based on user emotional responses |
CN103697900A (zh) * | 2013-12-10 | 2014-04-02 | 郭海锋 | 一种情感车载机器人通过增强现实进行危险预警的方法 |
US20150178915A1 (en) * | 2013-12-19 | 2015-06-25 | Microsoft Corporation | Tagging Images With Emotional State Information |
US20150257706A1 (en) | 2014-03-17 | 2015-09-17 | Htc Corporation | Portable electronic device and method for physiological measurement |
JP6054902B2 (ja) | 2014-03-20 | 2016-12-27 | ヤフー株式会社 | 感情推定装置、感情推定方法、及び感情推定プログラム |
KR101598601B1 (ko) | 2014-05-14 | 2016-03-02 | 전자부품연구원 | 상황 기반 서비스 지원 기술 |
CN104063427A (zh) * | 2014-06-06 | 2014-09-24 | 北京搜狗科技发展有限公司 | 一种基于语义理解的表情输入方法和装置 |
US9805381B2 (en) * | 2014-08-21 | 2017-10-31 | Affectomatics Ltd. | Crowd-based scores for food from measurements of affective response |
US10540348B2 (en) * | 2014-09-22 | 2020-01-21 | At&T Intellectual Property I, L.P. | Contextual inference of non-verbal expressions |
JP6365229B2 (ja) | 2014-10-23 | 2018-08-01 | 株式会社デンソー | 多感覚インタフェースの制御方法および多感覚インタフェース制御装置、多感覚インタフェースシステム |
CN104409085A (zh) * | 2014-11-24 | 2015-03-11 | 惠州Tcl移动通信有限公司 | 一种车载智能音乐播放器及其音乐播放方法 |
CN104597825B (zh) | 2014-12-11 | 2020-02-04 | 小米科技有限责任公司 | 信息推送方法和装置 |
US10592926B2 (en) * | 2014-12-18 | 2020-03-17 | Nbcuniversal Media, Llc | System and method for multimedia content composition |
JP2016136294A (ja) | 2015-01-23 | 2016-07-28 | セイコーエプソン株式会社 | 情報処理システム、サーバーシステム、情報処理装置及び情報処理方法 |
US10223459B2 (en) * | 2015-02-11 | 2019-03-05 | Google Llc | Methods, systems, and media for personalizing computerized services based on mood and/or behavior information from multiple data sources |
CN104699972A (zh) * | 2015-03-18 | 2015-06-10 | 小米科技有限责任公司 | 情绪识别提醒方法及装置 |
CN104809221B (zh) * | 2015-04-30 | 2018-06-19 | 努比亚技术有限公司 | 音乐信息的推荐方法及装置 |
CN105045916A (zh) | 2015-08-20 | 2015-11-11 | 广东顺德中山大学卡内基梅隆大学国际联合研究院 | 一种手机游戏推荐系统及其推荐方法 |
CN105791692B (zh) * | 2016-03-14 | 2020-04-07 | 腾讯科技(深圳)有限公司 | 一种信息处理方法、终端及存储介质 |
-
2016
- 2016-09-09 US US15/260,502 patent/US11049147B2/en active Active
-
2017
- 2017-09-05 KR KR1020170113156A patent/KR102013493B1/ko active IP Right Grant
- 2017-09-05 EP EP17189409.0A patent/EP3293691A1/en active Pending
- 2017-09-05 CN CN201710788154.5A patent/CN107807947B/zh active Active
- 2017-09-06 JP JP2017170947A patent/JP6547977B2/ja active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10960173B2 (en) | 2018-11-02 | 2021-03-30 | Sony Corporation | Recommendation based on dominant emotion using user-specific baseline emotion and emotion analysis |
Also Published As
Publication number | Publication date |
---|---|
EP3293691A1 (en) | 2018-03-14 |
KR20180028939A (ko) | 2018-03-19 |
CN107807947B (zh) | 2022-06-10 |
CN107807947A (zh) | 2018-03-16 |
KR102013493B1 (ko) | 2019-08-22 |
US11049147B2 (en) | 2021-06-29 |
JP2018041460A (ja) | 2018-03-15 |
US20180075490A1 (en) | 2018-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6547977B2 (ja) | 感情状態検出に基づいて電子デバイス上で推奨を提供するためのシステム及び方法 | |
US11924576B2 (en) | Dynamic activity-based image generation | |
US11252274B2 (en) | Messaging application sticker extensions | |
US11227626B1 (en) | Audio response messages | |
US11294545B2 (en) | Interface to display shared user groups | |
US9936127B2 (en) | Systems and methods for providing attention directing functions in an image capturing device | |
US10960173B2 (en) | Recommendation based on dominant emotion using user-specific baseline emotion and emotion analysis | |
KR102327203B1 (ko) | 전자 장치 및 그 동작 방법 | |
US10979752B1 (en) | Generating media content items based on location information | |
JP6452443B2 (ja) | データ・ネットワーク・サービスを介した感情共有のためのバイオセンサーの使用 | |
US10346480B2 (en) | Systems, apparatus, and methods for social graph based recommendation | |
US20150334772A1 (en) | Contextual information usage in systems that include accessory devices | |
KR102384311B1 (ko) | 이미지 기반으로 사용자 정보를 관리하는 디바이스 및 그 방법 | |
US20220365748A1 (en) | Device control using audio data | |
EP3555840A1 (en) | Wearable device control with inferred insights | |
US12047660B2 (en) | Information processing apparatus, information processing method, and program | |
US20180270178A1 (en) | Method and apparatus for sharing materials in accordance with a context |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180629 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180725 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190306 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190426 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190529 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190611 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6547977 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |