CN104571535A - 用于生成基于心情的触觉反馈的方法和装置 - Google Patents

用于生成基于心情的触觉反馈的方法和装置 Download PDF

Info

Publication number
CN104571535A
CN104571535A CN201510083095.2A CN201510083095A CN104571535A CN 104571535 A CN104571535 A CN 104571535A CN 201510083095 A CN201510083095 A CN 201510083095A CN 104571535 A CN104571535 A CN 104571535A
Authority
CN
China
Prior art keywords
mood
user
equipment
haptic signal
portable equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510083095.2A
Other languages
English (en)
Other versions
CN104571535B (zh
Inventor
J·M·克鲁兹-埃尔南德兹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of CN104571535A publication Critical patent/CN104571535A/zh
Application granted granted Critical
Publication of CN104571535B publication Critical patent/CN104571535B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7455Details of notification to user or communication with user or patient ; user input means characterised by tactile indication, e.g. vibration or electrical stimulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6027Methods for processing data by generating or executing the game program using adaptive systems learning from user actions, e.g. for skill level adjustment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/013Force feedback applied to a game
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Psychiatry (AREA)
  • Cardiology (AREA)
  • Multimedia (AREA)
  • Child & Adolescent Psychology (AREA)
  • Physiology (AREA)
  • Dermatology (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • Social Psychology (AREA)
  • Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

公开了一种生成基于心情的触觉反馈的方法和装置。一种触觉系统包括感测设备、数字处理单元和触觉发生器。在一个实施例中,所述感测设备被配置为根据由一个或多个传感器收集的心情信息检测用户的模态,并且能够响应用户的模态发出感测信号。数字处理单元能够根据该感测信号识别用户的状况,并且响应用户的状况提供触觉信号。在一个方面,用户的状况指示用户的心情和/或用户的心理状况。触觉发生器根据触觉信号生成触觉反馈。

Description

用于生成基于心情的触觉反馈的方法和装置
本申请是基于申请号为200980146024.5、申请日为2009年11月13日、发明名称为“用于生成基于心情的触觉反馈的方法和装置”的专利申请的分案申请。
技术领域
本发明的(多个)示例实施例涉及电子通信领域。更具体地,本发明的(多个)示例实施例涉及使用触觉反馈进行通信。
背景技术
随着基于计算机的系统、电器(appliance)、自动取款机(ATM)、销售点终端等变得愈发普及,人机接口的使用方便性变得越来越重要。这样的接口应该操作直观并且需要很少或者不需要训练就能使得几乎任何人可以操作该接口。市场上存在多种传统的用户接口设备,比如键盘、鼠标、操纵杆以及触摸屏。其中已知更直观且更具交互性的接口设备中的一种是触敏面板,其可以是触摸屏或触控板。触摸屏包括触敏输入面板和显示设备,并且通过对用户的触摸敏感并且显示用户可以看见并且“触摸”的内容的面板,给用户提供机械接口。
常规的人机接口,诸如键盘、语音和触摸屏,在接口操作过程中通常需要视觉辅助或注视。例如,当用户在触摸屏上输入他或她的(多个)选择时,用户需要注视和/或识别要进行触摸的位置。另外,当用户操作鼠标时,在他或她可以按压点击键之前,用户需要看着图标在屏幕上的移动。
与常规的人机接口相关联的一个问题是有时在人机接口的操作过程中无法获得视觉辅助。例如,卡车司机或飞行员通常需要将他或她的视觉保持在驾驶或飞行上,并且因此,不能在输入/选择操作过程中注视接口设备。另外,工人可能无法在嘈杂环境中听见听觉指令。
发明内容
本发明的(多个)实施例包括能够生成基于心情(mood)的触觉反馈的触觉系统,及其制造方法。一种触觉系统包括感测设备、数字处理单元和触觉发生器。在一个实施例中,所述感测设备被配置为根据由一个或多个传感器收集的心情信息检测用户的模态(modality),并且能够响应用户的模态发出感测信号。数字处理单元能够根据该感测信号识别用户的状况(condition),并且响应用户的状况提供触觉信号。在一个方面,所述用户的状况指示用户的心情或用户的心理状况。触觉发生器根据触觉信号生成触觉反馈。
根据下述的详细描述、附图和权利要求,本发明的(多个)示例实施例的附加特征和益处将变得显而易见。
附图说明
根据下面给出的详细描述和本发明各个实施例的附图,将会更完全地理解本发明的(多个)示例实施例,然而,这些实施例和附图不应将本发明局限于特定的实施例,而是仅用于解释和理解目的。
图1是示出了根据本发明一个实施例的能够生成基于心情的触觉感觉的触觉系统的图示;
图2是示出了根据本发明一个实施例的具有基于心情的触觉系统的汽车环境的示例应用的图示;
图3是示出了根据本发明一个实施例的具有基于心情的触觉系统的视频游戏环境的示例应用的图示;
图4示出了根据本发明一个实施例的能够与其它设备通信的基于心情的触觉系统;
图5示出了根据本发明一个实施例的能够处理基于心情的触觉信息的处理设备;和
图6是示出了根据本发明一个实施例的提供基于心情的触觉反馈的处理的流程图。
具体实施方式
此处在使用便携触觉设备响应一个或多个事件提供基于心情的触觉反馈的方法、系统和装置的上下文中描述本发明的各实施例。
本领域普通技术人员将认识到本发明的下列详细描述仅是说明性的,并不旨在以任何方式作为限制。受益于本公开的这些本领域技术人员容易想到本发明的其它实施例。现将详细参考在附图中示出的本发明各示例实施例的实现。在附图和下列详细描述中通篇使用相同的参考指示符(或数字)来指代相同或类似的部分。
为了清楚起见,未示出和描述此处描述的实现的所有标准硬件和例程特征。当然将会理解,在任意这种实际实现的开发中,必须做出多种特定于实现的决策以便实现开发者的特定目标,诸如符合关于系统和关于业务的约束,并且这些特定目标可以根据实现和开发者的不同而改变。另外,将会意识到,这种开发努力可能是复杂和费时的,但是仍然是受益于本公开的普通技术人员的例行工程工作。
本发明的(多个)实施例包括能够生成基于心情的触觉反馈的触觉系统和用于产生基于心情的触觉反馈的方法。触觉系统包括感测设备、数字处理单元和触觉发生器。在一个实施例中,所述感测设备采用传感器感知指示用户模态的心情信息,并且随后根据用户模态发出感测信号。在接收到(多个)感测信号之后,数字处理单元识别用户的状况或心情。在根据所述用户的状况生成触觉信号之后,触觉发生器响应触觉信号生成触觉反馈。
图1是示出了根据本发明一个实施例的能够生成基于心情的触觉感觉的触觉系统的图示100。图示100包括第一便携设备102、通信网络104和第二便携设备106。在一个实施例中,便携设备102和106可以经由网络104彼此通信,所述网络104可以包括一个或多个通信网络,诸如无线通信网络、因特网、私域网、局域网、城域网、广域网等。应当注意,如果向图示100中添加或从图示100中去除附加模块,不会改变本发明的示例实施例的底层概念。
在一个实施例中,便携设备102包括基于心情的触觉设备112、感测设备114和触觉发生器128。可以给设备102添加附加组件,诸如,显示器108、键盘110和天线116。应当注意,便携设备102可以是移动电话、个人数字助理(“PDA”)、蜂窝电话、便携计算机、触觉手表、触觉项链等。在另一方面,便携设备106包括基于心情的触觉设备122、感测设备124和触觉发生器130。类似地,还可以给便携设备106添加附加组件,诸如显示器118、键盘120和天线126。便携设备102和106可以是相同或不同的设备,但是只要它们两者都配备有基于心情的触觉设备,它们就能够彼此通信。
在一个实施例中,感测设备114包括被配置为感测和收集关于用户的心情信息的多个传感器。例如,感测设备114采用传感器以便经由各种模态或用户的心情状态检测和/或收集心情信息,用户的心情状态包括但不限于:用户的面部表情、语音语调和/或用户的生物测定参数。生物测定参数是用户的心情状态的子集,并且进一步包括体温、身体湿度或出汗、心搏或心率、呼吸节律、身体姿态、手势或移动等。在获得心情信息之后,可以是便携设备102或106机载的数字处理单元基于收集的心情信息识别用户的当前心情和/或(多个)心理状况。关于用户心情的信息随后被转发给关注方,关注方可以是用户自己或正与用户交互的(多个)人。例如,当两个人通过蜂窝电话交谈时,任意一方可以通过基于心情的触觉机制感知另一方的心情。
可替换地,感测设备114还包括传感器来检测周边(ambient)状况。例如,感测设备114收集关于周围的周边信息,诸如温度、湿度、照明、气压等。感测设备114和/或基于心情的触觉设备112可以使用周边信息连同心情信息来评估用户的心情。应当注意,周边信息还可以指示用户是处于敌对环境还是友好环境。
在操作中,用户A(图1未示出)使用便携设备102通过便携设备106与用户B通话和/或通信。在经由感测设备114感测到用户A的心情之后,基于心情的触觉设备112经由网络104将用户A的心情信息发送给便携设备106。在接收心情信息之后,触觉发生器130生成触觉反馈并且将其发送给用户B以指示用户A的心情。类似地,用户A也能以类似方式经由触觉发生器128感知用户B的心情。
随着能够检测人类心情以及环境状况的不同方面的高级感测技术的出现,具有高度准确性的人类行为和/或心理状况的人工智能或计算机评估变得愈发地可实现。例如,复杂的信号处理单元可以处理图像、语音和生物测定信息来生成大量心情信息或属性,以指示人类或用户的心情或身体状况。一旦心情信息被处理,则鉴于心情信息生成触觉反馈,其中触觉反馈可被发送给用户和/或正与用户交互的群体。便携设备102或106可以是手持设备、可佩戴计算机设备或能够从各种模态中识别用户心情的其它周围设备。便携设备102能够将基于心情的触觉反馈提供给处于附近或远程位置的(多个)用户。
在一个例子中,为了感知用户的心情,可以采用用于检测面部表情、语音分析和/或生物测定感测的感测技术。所述感测技术例如可以使用摄像机来观察用户的面部表情。根据某些面部表情,可以从视频记录中推断出用户的情感状态。应当注意,分析面部图像以推断人类的心情情感状态的技术已经是成熟且可获得的。还应当注意,设备上一般可以获得(多个)摄像机,诸如电话或PDS上的照相机。
感测技术还可以采用各种声音或音频传感器,以记录和/或便于语音分析。应当注意,经电话交谈时的语音频率和语音强度可以推断用户的心情。对于生物测定感测,可以使用不同传感器来测量体温、湿度(或排汗)、呼吸节律和/或心搏,以便指示用户的心情或状况。例如,可以使用触觉腕带或项链感测心搏,并且预测心情随时间的改变。
根据应用,可以使用不同模态以便生成作为目标的基于心情的触觉反馈。例如,为了在通过电话交谈的同时与朋友分享高兴的心理状态,可以通过从一个用户的电话向另一个发送表示高兴的心情或愉悦的心情状态的触觉提示信号来增强通信。为了在拨打手机或经手机交谈时捕捉用户的情感状态,例如可以使用手机上的数码照相机或摄像机捕捉心情信息或面部表情并且然后将捕捉到的心情信息或面部表情传输给正被呼叫的用户。
参考回图1,触觉系统包括便携设备102和106,其中每个便携设备还包括一个或多个传感器和执行器。在一个方面,传感器和执行器可被构造在同一设备上。传感器被用来检测用户状况,而执行器则被用来根据所述用户状况提供触觉反馈。例如,心率传感器能够感测用户的心率,而温度传感器可以测量用户的体温。随后处理检测到的信息诸如心率和体温,并且生成指示当前用户的心情的一系列触觉反馈。应当注意,术语“触觉反馈”可被称为触知效果、触知反馈、触觉效果、力反馈、振动触知反馈、触觉提示等。
基于心情的触觉设备可以经由无线网络104在它们自己之间通信。无线通信网络可以包括局域射频、蓝牙、蜂窝(GPRS、CDMA、GSM、CDPD、2.5G、3G等)、超宽带(UWB)、WiMax、ZigBee和/或其它自组织/网格无线网络技术。为了减少功耗,设备102和106还可以使用中继站来放大信号强度以保存功率。例如,中继站可以接收来自其它用户使用的其它触觉设备的触觉信号,以便保存功率和覆盖范围。
还可以在个人或团队运动中使用设备102或106,诸如扑克牌玩家、水球运动员或骑车旅行者,以识别运动员的心情状况。例如,设备102可以根据检测到的心情或心理信息通知骑车人之一加速或减速,以便改进团队表现。应当注意,设备102还可被用于其它应用,诸如监视精神病院内精神不稳定的病人。
在一个实施例中,触觉系统可以包括多个单元,其中这些单元中的某些可以位于胸部、腕部、足部等等以便感测用户的心情。触觉发生器128例如能够生成针对不同级别的心情波动的不同强度级别的触觉提示或触觉警告信号。例如,当用户略微不高兴时,触觉发生器128生成较轻的触觉提示,而当用户生气时则生成激烈的触觉提示。应当注意,使用触觉反馈指示用户的心理状况可以是微妙的、谨慎的和非介入的通信方法。
感测设备114和触觉发生器128可被组合或制造在单个设备内。例如,可以通过压电材料、形状记忆合金(“SMA”)、偏心旋转体(“ERM”)或线性谐振执行器(“LRA”)等提供振动触知反馈或触觉反馈。在一个实施例中,压电材料可用于执行感测功能和执行功能两者。
诸如压电材料的某些触觉材料具有感测和提供振动触知效果的物理属性。例如,当压电材料的物理形状由于压力变形时,压电材料释放电流以指示其检测到压力。压电材料的尺寸可被减小到相对较小的大小,诸如5毫米×5毫米。在一个实施例中,压电材料包括晶体和/或陶瓷,诸如石英(SiO2)。当给压电材料施加电压电势时,其从原始形状变形为膨胀形状。一旦去除了电压电势,压电材料可以返回其原始状态。然而,当压电材料被按压时,压电材料释放电流。结果,当被按压时,压电材料可以检测输入。如果以其它材料或器件诸如LRA、ERM和SMA取代压电材料,也可以执行传感器/执行器的类似功能。在一个例子中,在电压电势被去除之后,SMA能够保持变形的形状一段时间。应当注意,如果采用压电执行器之外的不同材料,本发明的实施例的底层概念并不改变。
采用基于心情的触觉反馈的优点是其本质上创建了在呼叫者之间传输心情信息的通信信道。基于心情的触觉系统可被应用于各种应用,诸如多方之间的会话、团队运动、军事任务、审问、病人监视等等。
图2是示出了根据本发明一个实施例的具有基于心情的触觉系统的汽车环境的示例应用的图示200。图示200包括汽车202和网络204,其中汽车202还包括具有基于心情的触觉设备208的方向盘206。应当注意,如果向图示200中添加或从图示200中去除附加设备和模块,不会改变本发明的示例实施例的底层概念。
在一个实施例中,汽车202包括未在图2中示出的感测设备、触觉发生器和心情处理单元,其中触觉发生器可与基于心情的触觉设备208结合。在检测到驾驶员的心情状况之后,触觉发生器能够生成各种触觉反馈,以便指示驾驶员的疲劳、警惕、分心和/或清醒级别。触觉发生器可以使驾驶员座椅振动,以减轻驾驶员紧张感或唤醒驾驶员。例如,方向盘206通过激励基于心情的触觉设备208生成振动触知反馈,以提醒驾驶员他或她太疲劳而不能继续驾驶车辆。可替换地,触觉发生器还可以将驾驶员的身体状况(或有效性)广播给关注方,诸如家庭成员、陪伴人员、高速路巡警等。应当注意,类似的基于心情的触觉系统可被应用于火车、飞机和/或航海业。
在操作过程中,汽车202的感测设备从驾驶员读取感知的输入,诸如排汗、面部表情、语音、心跳等。在处理感知的输入之后,心情处理单元根据感测到的输入推断驾驶员的精神状态、心情、感觉等。在识别驾驶员的心情状况之后,触觉发生器生成触觉反馈以便指示驾驶员的当前心情。
在一个方面,基于心情的触觉设备208被配置为改变同一用户的精神或心情状态(从难过到高兴)。另外,还可以使用设备208通过提供某种类型的触觉反馈,保持相同用户的当前精神或心情状态(放松状态、高度集中)。另外,设备208能够将同一触觉效果传输给第三方个体或多个个体,诸如网络组。
图3是示出了根据本发明一个实施例的具有基于心情的触觉系统的视频游戏环境的示例应用的图示250。图示250包括终端256、游戏台252和游戏控制器254,其中基于心情的触觉控制器258-260被放置在游戏台252和控制器260内。应当注意,如果向图示250中添加或从图示250去除附加设备和模块,不会改变本发明的示例实施例的底层概念。
对于游戏设备,在一个实施例中,游戏可以根据玩家的心情或情感改变困难程度或环境。例如,当基于心情的触觉控制器258或260的感测设备感知到放松的玩家时(例如,低排汗),游戏台自动将游戏增加到更难的级别或不同的游戏事件。可替换地,当基于心情的触觉控制器258或260的感测设备感知到紧张或兴奋的心情时(例如,高排汗),游戏台将游戏调整为更容易的级别或不同的游戏事件。换言之,游戏台可以监视并且确定用户玩游戏时有多么“冷静”。
在替换实施例中,基于心情的触觉系统还可用于在与环境或设置有关的工作中提高效率。例如,可以根据以基于心情的触觉系统检测到的工人的心情来调整制造组装线的速度。
图4示出了根据本发明一个实施例的能够与其它设备通信的基于心情的触觉系统。图示300包括便携或可佩戴接口设备302、PC304、蜂窝电话306、PDA 308、服务器310和能够执行指令的处理设备312。应当注意,如果向图示300中添加或从图示300去除附加诸如电源的模块,不会改变本发明的示例实施例的底层概念。
设备302还包括传感器320、内部滤波器322、选择器324、发生器326、以及触觉输出设备328。在一个实施例中,传感器320被配置为检测面部表情、语音语调和与设备302的用户有关的生物测定。滤波器322用于滤除任意无关信息,诸如不需要的图像和语音,这些信息与来自用户的心情信息相反,被认为是自然和/或周围噪声。在另一个实施例中,内部滤波器322位于主机内,其中滤波处理由主计算机执行。发生器326响应经滤波的心情信息生成命令,并且经由可以是有线或无线通信的各种通信信道332-338向一个或多个处理设备(诸如PC 304或PDA 308)传输输入命令。
选择器324包括用于存储包含触觉效果列表的触觉数据的一个或多个触觉库。在一个实施例中,触觉效果列表用于根据检测到的心情信息给用户提供触觉反馈。每种心情检测或输入例如可以要求唯一的触觉反馈。应当注意,包含触觉数据的库还可以位于远程主机内。在一个替换实施例中,触觉数据可被动态生成并被不断更新,以便模拟和/或再现检测到的(多个)心情状态。为了实时模拟心情状态,选择器324能够动态生成触觉效果,以模拟检测到的心情和/或(多个)心情状态。触觉输出设备328根据来自选择器324的触觉数据生成触觉反馈。例如,振动效果模拟高兴的心情。
设备302的一种功能是将基于心情的触觉反馈同时传送给一个或多个设备,诸如膝上计算机304、蜂窝电话306、PDA 308、服务器310等等。应当注意,根据应用,组件320-328还可被分布在若干不同的实体内。设备302可以经由电缆连接、无线连接和有线和无线网络的组合与其它设备304-310通信。
图5示出了根据本发明一个实施例的能够处理基于心情的触觉信息的处理单元500。单元500包括处理单元501、接口总线511和输入/输出(“IO”)单元520。处理单元501包括处理器502、主存储器504、系统总线511、静态存储器设备506、总线控制单元505、大容量存储存储器507和心情控制器530。总线511用于在各种组件和处理器502之间传输信息,以便进行数据处理。处理器502可以是各种通用处理器或微处理器中的任意一种,诸如,PentiumTM微处理器、Core TM2Duo、Core TM2Quad、AMDAthlon TM处理器、Motorola TM 68040或Power PC TM微处理器。心情控制器530响应基于心情的输入信号生成触觉反馈。
可以包括多级高速缓存存储器的主存储器504存储频繁使用的数据和指令。主存储器504可以是RAM(随机存取存储器)、MRAM(磁性RAM)或闪存存储器。静态存储器506可以是ROM(只读存储器),其耦接到总线511,用于存储静态信息和/或指令。总线控制单元505耦接到总线511-512,并且控制可以使用总线的组件,诸如主存储器504或处理器502。总线控制单元505管理总线511和总线512之间的通信。大容量存储存储器507,其可以是磁盘、光盘、硬盘驱动器、软盘、CD-ROM和/或用于存储大量数据的闪存存储器。在一个实施例中,执行器控制模块530是执行触觉效果控制功能的独立组件(IC)。执行器控制器530的一个功能是驱动一个或多个触觉执行器524,后者可以是远程可佩戴戒指。在另一个实施例中,执行器控制模块530可以驻留在处理器502、主存储器504和/或静态存储器506内。
在一个实施例中,I/O单元520包括柔性显示器521、键盘522、光标控制设备523和通信设备525。键盘522可以是用于在处理单元500和(多个)计算机操作员之间传送信息的常规字母数字输入设备。用户输入设备的另一个例子是光标控制设备523,诸如常规鼠标、触摸鼠标、轨迹球、手指或用于在单元500和(多个)用户之间传送信息的其它类型的光标。通信设备525连接到总线512,以通过广域网存取来自远程计算机或服务器的信息。通信设备525可以包括调制解调器或无线网络接口设备,或便于单元500和网络之间的通信的其它类似设备。
本发明的(多个)示例实施例包括将在下面描述的各处理步骤。这些实施例的步骤可被具体化为机器或计算机可执行指令。所述指令可用于使得编程有该指令的通用或专用系统执行本发明的(多个)实施例的步骤。可替换地,本发明的(多个)实施例的步骤可被由包含用于执行这些步骤的硬布线逻辑的专用硬件组件执行,或由被编程的计算机组件和定制硬件组件的任意组合执行。
图6是示出了根据本发明一个实施例的提供基于心情的触觉反馈的处理的流程图600。在框602,能够基于心情信息生成触觉反馈的处理感知与用户相关联的第一事件。在一个例子中,该处理被配置为感知与用户相关联的面部表情、语音和心率。在另一个例子中,该处理可以检测用户的生物测定,诸如体温和呼吸节律。
在框604,该处理响应第一事件生成感测信号。在一个实施例中,当第一事件指示高兴心情时,处理提供指示用户当前心情的高兴指示符。可替换地,当第一事件指示难过心情时,该处理能够提供指示用户当前心情的难过指示符。
在框606,该处理经由网络接收感测信号,并在随后基于该感测信号确定用户的状况或心情。该处理还能够通过无线通信网络获得感测信号。应当注意,可以对用户心情连续采样,并可由此更新用户的心情。
在框608,该处理根据用户的状况生成触觉信号,并且将触觉信号转发给触觉发生器。在一个实施例中,该处理还经由通信网络将触觉信号发送给由另一个用户操作的另一个触觉系统。
在框610,该处理响应该触觉信号生成触觉反馈。在一个实施例中,处理根据用户的状况或心情调整游戏的难度级别。在另一个实施例中,处理提供指示用户的状况或心情的警报信号。在一个例子中,该处理能够感测与周边状况相关联的第二事件。例如,该处理能够检测周围环境的温度。
虽然已经示出并且描述了本发明的特定实施例,但本领域的普通技术人员显见的是,可以基于此处的教导做出改变和修改,而不脱离本发明及其更宽的方面。因此,所附权利要求旨在将如同在本发明的(多个)示例实施例的真实精神和范围内的所有这些改变和修改包括在其范围内。

Claims (26)

1.一种用于生成基于心情的触觉提示的方法,该方法包括:
通过便携设备感测用户的心情信息;
通过该便携设备基于所感测的心情信息确定该用户的心情;
通过该便携设备基于所确定的用户的心情生成触觉信号,该触觉信号使触觉提示被生成,其中该触觉提示传达所确定的用户的心情;以及
通过该便携设备使该触觉信号被传送到远离该便携设备的设备。
2.如权利要求1所述的方法,其中使该触觉信号被传送到远离该便携设备的设备进一步包括:
通过该便携设备使该触觉信号被传送到远离该便携设备的多个设备。
3.如权利要求1所述的方法,其中该便携设备和远离该便携设备的设备经由网络彼此通信地耦连,其中该触觉信号经由该网络传送。
4.如权利要求1所述的方法,进一步包括:
通过该便携设备感测与该用户相关联的周边状况;并且其中生成触觉信号进一步包括:
通过该便携设备基于该心情信息和所感测的周边状况生成触觉信号。
5.如权利要求4所述的方法,其中该周边状况包括温度、湿度、照明或气压。
6.如权利要求1所述的方法,其中使该触觉信号被传送进一步包括使该触觉信号在该便携设备与远离该便携设备的设备之间的电话呼叫期间被传送。
7.如权利要求6所述的方法,其中该心情信息在该电话呼叫之前被感测。
8.如权利要求6所述的方法,其中该心情信息在该电话呼叫期间被感测。
9.如权利要求1所述的方法,进一步包括:
通过该便携设备从远离该便携设备的设备接收第二触觉信号,该第二触觉信号指示远离该便携设备的设备的用户的第二心情;以及
通过该便携设备生成将该第二心情传达给用户的第二触觉提示。
10.如权利要求1所述的方法,进一步包括:
通过远离该便携设备的设备接收该触觉信号;以及
通过远离该便携设备的设备生成触觉提示。
11.如权利要求1所述的方法,其中感测心情信息包括:
通过便携设备感测面部表情、语音语调、体温、身体湿度、心搏、呼吸节律、身体姿态、手势、或身体移动。
12.如权利要求1所述的方法,其中确定该用户的心情进一步包括通过该便携设备确定该用户的心情的级别,其中触觉信号的强度基于该用户的心情的级别。
13.如权利要求1所述的方法,其中感测心情信息进一步包括:
捕捉该用户的视频,其中该心情信息包括捕捉的视频;并且
通过该便携设备使该捕捉的视频被发送。
14.一种用于生成基于心情的触觉提示的系统,该系统包括:
装置,该装置包括:
感测设备,该感测设备被配置为感测用户的心情信息;和
处理器,该处理器被配置为:
基于所感测的心情信息确定该用户的心情;
基于所确定的用户的心情生成触觉信号,该触觉信号使触觉提示被生成,其中该触觉提示传达所确定的用户的心情;以及
使该触觉信号被传送到远离该装置的设备。
15.如权利要求14所述的系统,其中该处理器被进一步配置为:
使该触觉信号被传送到远离便携设备的多个设备。
16.如权利要求14所述的系统,其中该装置和远离该装置的设备经由网络彼此通信地耦连,其中该触觉信号经由该网络传送。
17.如权利要求14所述的系统,其中该感测设备被进一步配置为感测与该用户相关联的周边状况;并且
其中该处理器被进一步配置为基于该心情信息和所感测的周边状况生成触觉信号。
18.如权利要求17所述的系统,其中该周边状况包括温度、湿度、照明或气压。
19.如权利要求17所述的系统,其中该心情信息在电话呼叫之前被感测。
20.如权利要求17所述的系统,其中该心情信息在电话呼叫期间被感测。
21.如权利要求14所述的系统,其中该处理器被进一步配置为使该触觉信号在该装置与远离该装置的装置之间的电话呼叫期间被传送。
22.如权利要求14所述的系统,其中该处理器被进一步配置为:
从远离该装置的设备接收第二触觉信号,该第二触觉信号指示远离该装置的设备的用户的第二心情;以及
生成将该第二心情传达给用户的第二触觉提示。
23.如权利要求14所述的系统,进一步包括:
远离该装置的设备,其中远离该装置的设备被配置为接收触觉信号和生成触觉提示。
24.如权利要求14所述的系统,其中该处理器被进一步配置为感测面部表情、语音语调、体温、身体湿度、心搏、呼吸节律、身体姿态、手势、或身体移动。
25.如权利要求14所述的系统,其中该用户的心情包括该用户的心情的级别,其中触觉信号的强度基于该用户的心情的级别。
26.如权利要求14所述的系统,其中该处理器被进一步配置为:
捕捉该用户的视频,其中该心情信息包括捕捉的视频;以及
使该捕捉的视频被发送。
CN201510083095.2A 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置 Expired - Fee Related CN104571535B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/274,152 2008-11-19
US12/274,152 US8004391B2 (en) 2008-11-19 2008-11-19 Method and apparatus for generating mood-based haptic feedback
CN200980146024.5A CN102216876B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN200980146024.5A Division CN102216876B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Publications (2)

Publication Number Publication Date
CN104571535A true CN104571535A (zh) 2015-04-29
CN104571535B CN104571535B (zh) 2018-03-23

Family

ID=42110296

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200980146024.5A Expired - Fee Related CN102216876B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置
CN201510083095.2A Expired - Fee Related CN104571535B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN200980146024.5A Expired - Fee Related CN102216876B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Country Status (6)

Country Link
US (4) US8004391B2 (zh)
EP (1) EP2350776A2 (zh)
JP (2) JP5643214B2 (zh)
KR (3) KR101800992B1 (zh)
CN (2) CN102216876B (zh)
WO (1) WO2010059513A2 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105852823A (zh) * 2016-04-20 2016-08-17 吕忠华 一种医学用智能化息怒提示设备
CN107071154A (zh) * 2017-03-22 2017-08-18 广东小天才科技有限公司 一种通话过程中的提示方法及移动设备
WO2021119910A1 (zh) * 2019-12-16 2021-06-24 瑞声声学科技(深圳)有限公司 一种触觉反馈分享方法、装置及系统

Families Citing this family (119)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100312129A1 (en) 2005-01-26 2010-12-09 Schecter Stuart O Cardiovascular haptic handle system
US20100152620A1 (en) * 2008-12-12 2010-06-17 Immersion Corporation Method and Apparatus for Providing A Haptic Monitoring System Using Multiple Sensors
US20100201652A1 (en) * 2009-02-12 2010-08-12 Sony Ericsson Mobile Communications Ab Embedded piezoelectric elements in touch panels
KR101054359B1 (ko) * 2009-02-16 2011-08-04 한국과학기술원 근감각 피드백을 이용한 상호작용장치 및 이의 작동방법
JP5899111B2 (ja) * 2009-04-15 2016-04-06 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. ユーザ環境を適応させるための方法及びシステム
KR101262922B1 (ko) * 2009-12-10 2013-05-09 한국전자통신연구원 감성 변화에 따른 감성지수 결정 장치 및 그 방법
US8314691B2 (en) * 2010-01-12 2012-11-20 Shepherd Center, Inc. Assistive driving aid
US20110276659A1 (en) * 2010-04-05 2011-11-10 Electronics And Telecommunications Research Institute System and method for providing multimedia service in a communication system
WO2011133860A2 (en) * 2010-04-23 2011-10-27 Immersion Corporation Systems and methods for providing haptic effects
US10779761B2 (en) * 2010-06-07 2020-09-22 Affectiva, Inc. Sporadic collection of affect data within a vehicle
CN102387241B (zh) * 2010-09-02 2015-09-23 联想(北京)有限公司 一种移动终端及其发送处理方法
JP5149954B2 (ja) * 2010-11-25 2013-02-20 東芝テック株式会社 情報処理端末
US20140025385A1 (en) * 2010-12-30 2014-01-23 Nokia Corporation Method, Apparatus and Computer Program Product for Emotion Detection
US20120182211A1 (en) * 2011-01-14 2012-07-19 Research In Motion Limited Device and method of conveying emotion in a messaging application
US8674961B2 (en) * 2011-01-31 2014-03-18 National Semiconductor Corporation Haptic interface for touch screen in mobile device or other device
US8942828B1 (en) 2011-04-13 2015-01-27 Stuart Schecter, LLC Minimally invasive cardiovascular support system with true haptic coupling
KR101121784B1 (ko) * 2011-05-28 2012-03-09 (주)이미지스테크놀로지 입출력 성질을 가진 소자를 이용한 터치 및 햅틱 구동 시스템
US10191546B2 (en) * 2011-06-20 2019-01-29 Immersion Corporation Haptic theme framework
KR101779505B1 (ko) 2011-06-29 2017-09-18 엘지전자 주식회사 이동 단말기 및 이동 단말기의 생체신호 측정 방법
US9762719B2 (en) * 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
CN102438064A (zh) * 2011-09-28 2012-05-02 宇龙计算机通信科技(深圳)有限公司 移动终端的情绪表达方法、系统及移动终端
US8781565B2 (en) 2011-10-04 2014-07-15 Qualcomm Incorporated Dynamically configurable biopotential electrode array to collect physiological data
BR112014010841A8 (pt) * 2011-11-09 2017-06-20 Koninklijke Philips Nv método de provisão de um serviço em uma rede de dados, dispositivo móvel de comunicação eletrônica, e, software de controle para permitir a realização de um método
US20130144537A1 (en) * 2011-12-03 2013-06-06 Neuro Analytics and Technologies, LLC Real Time Assessment During Interactive Activity
US20130227409A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Integrating sensation functionalities into social networking services and applications
JP5929145B2 (ja) * 2011-12-07 2016-06-01 株式会社ニコン 電子機器、情報処理方法およびプログラム
US8954372B2 (en) 2012-01-20 2015-02-10 Fuji Xerox Co., Ltd. System and methods for using presence data to estimate affect and communication preference for use in a presence system
US20130305169A1 (en) * 2012-05-11 2013-11-14 Robert Evan Gold Methods and Systems for Providing Feedback in Interactive, Interest Centric Communications Environment
US10013082B2 (en) 2012-06-05 2018-07-03 Stuart Schecter, LLC Operating system with haptic interface for minimally invasive, hand-held surgical instrument
DE102012214697A1 (de) 2012-08-01 2014-02-06 Soma Analytics Ug (Haftungsbeschränkt) Vorrichtung, Verfahren und Applikation zur Ermittlung eines aktuellenBelastungsniveaus
US9116546B2 (en) 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
JP5634462B2 (ja) * 2012-08-31 2014-12-03 京セラドキュメントソリューションズ株式会社 表示入力装置および画像形成装置
CN103678417B (zh) * 2012-09-25 2017-11-24 华为技术有限公司 人机交互数据处理方法和装置
US9104231B2 (en) 2012-09-27 2015-08-11 Microsoft Technology Licensing, Llc Mood-actuated device
WO2014065781A1 (en) * 2012-10-23 2014-05-01 Empire Technology Development, Llc Filtering user actions based on user's mood
US9218055B2 (en) 2012-11-21 2015-12-22 SomniQ, Inc. Devices, systems, and methods for empathetic computing
US9378655B2 (en) * 2012-12-03 2016-06-28 Qualcomm Incorporated Associating user emotion with electronic media
CN103905619A (zh) * 2012-12-26 2014-07-02 腾讯科技(深圳)有限公司 一种基于移动终端的交互方法、系统及移动终端
US9046884B2 (en) 2012-12-31 2015-06-02 Microsoft Technology Licensing, Llc Mood-actuated device
JP2014134922A (ja) * 2013-01-09 2014-07-24 Sony Corp 情報処理装置、情報処理方法およびプログラム
US20140191939A1 (en) * 2013-01-09 2014-07-10 Microsoft Corporation Using nonverbal communication in determining actions
EP2759949A1 (en) 2013-01-28 2014-07-30 Tata Consultancy Services Limited Media system for generating playlist of multimedia files
US10504339B2 (en) * 2013-02-21 2019-12-10 Immersion Corporation Mobile device with instinctive alerts
US20140239743A1 (en) * 2013-02-27 2014-08-28 James Edward Jennings Xeno transduction system
CN103179274A (zh) * 2013-03-11 2013-06-26 广东欧珀移动通信有限公司 在移动终端上显示心情的方法及系统
US9202352B2 (en) * 2013-03-11 2015-12-01 Immersion Corporation Automatic haptic effect adjustment system
US9904394B2 (en) * 2013-03-13 2018-02-27 Immerson Corporation Method and devices for displaying graphical user interfaces based on user contact
US10623480B2 (en) 2013-03-14 2020-04-14 Aperture Investments, Llc Music categorization using rhythm, texture and pitch
US10225328B2 (en) 2013-03-14 2019-03-05 Aperture Investments, Llc Music selection and organization using audio fingerprints
US10061476B2 (en) 2013-03-14 2018-08-28 Aperture Investments, Llc Systems and methods for identifying, searching, organizing, selecting and distributing content based on mood
US11271993B2 (en) 2013-03-14 2022-03-08 Aperture Investments, Llc Streaming music categorization using rhythm, texture and pitch
US10242097B2 (en) 2013-03-14 2019-03-26 Aperture Investments, Llc Music selection and organization using rhythm, texture and pitch
US9875304B2 (en) 2013-03-14 2018-01-23 Aperture Investments, Llc Music selection and organization using audio fingerprints
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US9274603B2 (en) * 2013-05-24 2016-03-01 Immersion Corporation Method and apparatus to provide haptic feedback based on media content and one or more external parameters
CN104239304B (zh) * 2013-06-07 2018-08-21 华为技术有限公司 一种数据处理的方法、装置以及设备
CN103315753A (zh) * 2013-06-24 2013-09-25 西南大学 便携式情感分析仪及分析方法
US10325457B2 (en) 2013-08-29 2019-06-18 Sony Corporation Wristband-type information processing device, information processing system, and information processing method
US9892413B2 (en) * 2013-09-05 2018-02-13 International Business Machines Corporation Multi factor authentication rule-based intelligent bank cards
US9669297B1 (en) * 2013-09-18 2017-06-06 Aftershock Services, Inc. Using biometrics to alter game content
US9368006B1 (en) * 2013-09-24 2016-06-14 Woodenshark, LLC Wearable bracelet with bidirectional network connectivity and touch feedback
US20150084735A1 (en) * 2013-09-25 2015-03-26 Lenovo (Singapore) Pte. Ltd. Wearable information handling device outputs
US9489048B2 (en) * 2013-12-13 2016-11-08 Immersion Corporation Systems and methods for optical transmission of haptic display parameters
GB2521436A (en) 2013-12-20 2015-06-24 Nokia Corp Method and apparatus for adaptive feedback
US9754445B2 (en) 2013-12-31 2017-09-05 Video Gaming Technologies, Inc. Stress detecting input device for a gaming machine
US8941500B1 (en) 2014-01-23 2015-01-27 Google Inc. Somatosensory type notification alerts
US10254836B2 (en) * 2014-02-21 2019-04-09 Immersion Corporation Haptic power consumption management
EP3110606B1 (en) * 2014-02-24 2021-09-15 Sony Group Corporation Smart wearable devices and methods for automatically configuring capabilities with biology and environment capture sensors
US20220147562A1 (en) 2014-03-27 2022-05-12 Aperture Investments, Llc Music streaming, playlist creation and streaming architecture
US9509789B2 (en) * 2014-06-04 2016-11-29 Grandios Technologies, Llc Managing mood data on a user device
US9390706B2 (en) * 2014-06-19 2016-07-12 Mattersight Corporation Personality-based intelligent personal assistant system and methods
KR102254705B1 (ko) * 2014-09-19 2021-05-24 삼성전자주식회사 단말 장치 및 그 제어방법
KR102225400B1 (ko) 2014-12-04 2021-03-09 삼성전자주식회사 웨어러블 디바이스 및 웨어러블 디바이스에서 메시지를 전송하는 방법
EP3262490A4 (en) 2015-02-23 2018-10-17 Somniq, Inc. Empathetic user interface, systems, and methods for interfacing with empathetic computing device
KR20160105321A (ko) * 2015-02-27 2016-09-06 임머숀 코퍼레이션 사용자의 무드에 기초하는 액션 생성
CN104799831A (zh) * 2015-03-18 2015-07-29 四川九洲电器集团有限责任公司 一种用于情感监测的可穿戴设备
US10613629B2 (en) 2015-03-27 2020-04-07 Chad Laurendeau System and method for force feedback interface devices
US9853905B2 (en) 2015-04-02 2017-12-26 Honda Motor Co., Ltd. System and method for wireless connected device prioritization in a vehicle
US10293260B1 (en) * 2015-06-05 2019-05-21 Amazon Technologies, Inc. Player audio analysis in online gaming environments
CN105100435A (zh) * 2015-06-15 2015-11-25 百度在线网络技术(北京)有限公司 移动通讯应用方法和装置
US20160378186A1 (en) * 2015-06-23 2016-12-29 Intel Corporation Technologies for controlling haptic feedback intensity
US10210737B2 (en) * 2015-06-23 2019-02-19 Cleveland State University Systems and methods for privacy-aware motion tracking with notification feedback
CN105139317B (zh) * 2015-08-07 2018-10-09 北京环度智慧智能技术研究所有限公司 兴趣取向值测验的认知指标分析方法
US10248207B2 (en) * 2015-10-28 2019-04-02 Capital One Services, Llc Systems and methods for providing variable haptic feedback
CN113037926B (zh) 2015-11-13 2023-08-22 索尼公司 通信系统、信息通信方法和存储介质
USD806711S1 (en) 2015-12-11 2018-01-02 SomniQ, Inc. Portable electronic device
WO2017100641A1 (en) 2015-12-11 2017-06-15 SomniQ, Inc. Apparatus, system, and methods for interfacing with a user and/or external apparatus by stationary state detection
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
US10105608B1 (en) 2015-12-18 2018-10-23 Amazon Technologies, Inc. Applying participant metrics in game environments
US10382820B2 (en) * 2016-04-01 2019-08-13 Huawei Technologies Co., Ltd. Apparatus and method for bandwidth allocation as a function of a sensed characteristic of a user
US11660442B2 (en) 2016-04-01 2023-05-30 University of Pittburgh-Of the Commonwealth System of Higher Education Regulatory device and associated method
WO2017196666A1 (en) * 2016-05-09 2017-11-16 Subpac, Inc. Tactile sound device having active feedback system
US9886829B2 (en) * 2016-06-20 2018-02-06 Immersion Corporation Systems and methods for closed-loop control for haptic feedback
US9921609B2 (en) 2016-08-02 2018-03-20 Immersion Corporation Systems and methods for deformation and haptic effects
WO2018035442A1 (en) * 2016-08-19 2018-02-22 Xsync Technologies Llc Systems and methods for multimedia tactile augmentation
WO2018042799A1 (ja) * 2016-08-29 2018-03-08 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US10884502B2 (en) * 2016-11-23 2021-01-05 Google Llc Providing mediated social interactions
US10078370B2 (en) * 2016-11-23 2018-09-18 Immersion Corporation Devices and methods for modifying haptic effects
US10769418B2 (en) 2017-01-20 2020-09-08 At&T Intellectual Property I, L.P. Devices and systems for collective impact on mental states of multiple users
US20180247443A1 (en) * 2017-02-28 2018-08-30 International Business Machines Corporation Emotional analysis and depiction in virtual reality
CN108653897A (zh) * 2017-03-31 2018-10-16 高军 一种单兵心理调适仪系统
GB201713301D0 (en) * 2017-08-18 2017-10-04 Revolutioneyes Me Ltd Communication method
KR101901364B1 (ko) 2017-09-18 2018-11-22 주식회사 씨케이머티리얼즈랩 햅틱 장치를 위한 무선 제어 장치 및 방법
US20190138095A1 (en) * 2017-11-03 2019-05-09 Qualcomm Incorporated Descriptive text-based input based on non-audible sensor data
US10776576B2 (en) 2017-11-16 2020-09-15 International Business Machines Corporation Automated mobile device detection
CN108491074B (zh) * 2018-03-09 2021-07-09 Oppo广东移动通信有限公司 电子装置、运动辅助方法及相关产品
KR102311660B1 (ko) * 2018-09-17 2021-10-13 주식회사 씨케이머티리얼즈랩 햅틱 장치를 위한 무선 제어 장치 및 방법
CN109432779B (zh) * 2018-11-08 2022-05-17 北京旷视科技有限公司 难度调整方法、装置、电子设备及计算机可读存储介质
CN109582137A (zh) * 2018-11-15 2019-04-05 深圳市知更鸟旅游投资发展有限公司 一种行为动作识别系统及其方法
US10835823B2 (en) * 2018-12-27 2020-11-17 Electronic Arts Inc. Sensory-based dynamic game-state configuration
CN113631212B (zh) 2019-01-04 2023-06-02 阿波罗神经科学公司 用于经皮振动的造波的系统和方法
KR20200093090A (ko) * 2019-01-07 2020-08-05 현대자동차주식회사 차량 및 그 제어방법
CN110279426A (zh) * 2019-06-03 2019-09-27 常州为伊心理咨询有限公司 一种综合性中学生心理测评系统
US20220121283A1 (en) * 2019-06-12 2022-04-21 Hewlett-Packard Development Company, L.P. Finger clip biometric virtual reality controllers
US11867242B2 (en) 2020-07-22 2024-01-09 Nsk Ltd. Power transmission path switching device and two-stage transmission
WO2022158710A1 (en) 2021-01-21 2022-07-28 Samsung Electronics Co., Ltd. Methods and systems for customizing devices in an iot environment using self-adaptive mechanism
CN114598896A (zh) * 2022-02-17 2022-06-07 北京达佳互联信息技术有限公司 网络直播方法、装置、电子设备以及存储介质
CN115826770A (zh) * 2022-10-26 2023-03-21 瑞声开泰声学科技(上海)有限公司 触觉反馈方法和装置
CN116943226B (zh) * 2023-09-20 2024-01-05 小舟科技有限公司 基于情绪识别的游戏难度调节方法、系统、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
CN1434947A (zh) * 2000-06-30 2003-08-06 伊梅森公司 包含触觉反馈功能的聊天界面
CN1578964A (zh) * 2001-10-30 2005-02-09 英默森公司 在与虚拟宠物交互中提供触觉反馈的方法和装置
US20060221935A1 (en) * 2005-03-31 2006-10-05 Wong Daniel H Method and apparatus for representing communication attributes

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2928344B2 (ja) * 1990-07-11 1999-08-03 松下電器産業株式会社 体調監視装置
JP2868192B2 (ja) * 1991-07-30 1999-03-10 学校法人帝京平成大学 人の心理的変化の推定方法及び装置
JPH08229132A (ja) * 1994-12-28 1996-09-10 Hitachi Ltd 生体信号測定・誘導装置
US5720619A (en) * 1995-04-24 1998-02-24 Fisslinger; Johannes Interactive computer assisted multi-media biofeedback system
JPH09294724A (ja) * 1996-05-08 1997-11-18 Sanyo Electric Co Ltd 精神安定化訓練装置
JP2001252265A (ja) * 2000-03-08 2001-09-18 Sharp Corp バイオフィードバック装置
US7689437B1 (en) * 2000-06-16 2010-03-30 Bodymedia, Inc. System for monitoring health, wellness and fitness
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
US6963762B2 (en) * 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
US20040125120A1 (en) * 2001-06-08 2004-07-01 Michael Weiner Method and apparatus for interactive transmission and reception of tactile information
US20030195040A1 (en) * 2002-04-10 2003-10-16 Breving Joel S. Video game system and game controller
US8849379B2 (en) * 2002-04-22 2014-09-30 Geelux Holdings, Ltd. Apparatus and method for measuring biologic parameters
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
JP4165707B2 (ja) * 2004-03-22 2008-10-15 株式会社国際電気通信基礎技術研究所 刺激提示システム
EP1582965A1 (en) * 2004-04-01 2005-10-05 Sony Deutschland Gmbh Emotion controlled system for processing multimedia data
GB2416962B (en) * 2004-08-05 2009-04-01 Vodafone Plc New communication type for mobile telecommunications networks
US7148789B2 (en) * 2004-09-09 2006-12-12 Motorola, Inc. Handheld device having multiple localized force feedback
US20070063849A1 (en) * 2005-09-02 2007-03-22 Francesca Rosella Wearable haptic telecommunication device and system
US20070063850A1 (en) * 2005-09-13 2007-03-22 Devaul Richard W Method and system for proactive telemonitor with real-time activity and physiology classification and diary feature
JP2007115147A (ja) 2005-10-21 2007-05-10 Aruze Corp ユーザの感情や体調の安定化を図る感情・体調の安定化装置
WO2007055099A1 (ja) * 2005-11-09 2007-05-18 Pioneer Corporation 運転者精神状態情報提供システム
TWI311067B (en) * 2005-12-27 2009-06-21 Ind Tech Res Inst Method and apparatus of interactive gaming with emotion perception ability
US7978081B2 (en) * 2006-01-09 2011-07-12 Applied Technology Holdings, Inc. Apparatus, systems, and methods for communicating biometric and biomechanical information
US8157730B2 (en) * 2006-12-19 2012-04-17 Valencell, Inc. Physiological and environmental monitoring systems and methods
US8098273B2 (en) * 2006-12-20 2012-01-17 Cisco Technology, Inc. Video contact center facial expression analyzer module
EP1936929A1 (en) * 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
KR101402243B1 (ko) * 2006-12-21 2014-06-02 삼성전자주식회사 촉각 서비스를 제공하는 휴대단말기 및 그 방법
US20080220865A1 (en) * 2007-03-06 2008-09-11 Wei Hsu Interactive playstation controller
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
US9317110B2 (en) * 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US9754078B2 (en) 2007-06-21 2017-09-05 Immersion Corporation Haptic health feedback monitoring
US20090002178A1 (en) * 2007-06-29 2009-01-01 Microsoft Corporation Dynamic mood sensing
US20090110246A1 (en) * 2007-10-30 2009-04-30 Stefan Olsson System and method for facial expression control of a user interface
EP2741177B1 (en) * 2008-07-15 2019-06-26 Immersion Corporation Systems and Methods for Transmitting Haptic Messages
US9046884B2 (en) * 2012-12-31 2015-06-02 Microsoft Technology Licensing, Llc Mood-actuated device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
CN1434947A (zh) * 2000-06-30 2003-08-06 伊梅森公司 包含触觉反馈功能的聊天界面
CN1578964A (zh) * 2001-10-30 2005-02-09 英默森公司 在与虚拟宠物交互中提供触觉反馈的方法和装置
US20060221935A1 (en) * 2005-03-31 2006-10-05 Wong Daniel H Method and apparatus for representing communication attributes

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105852823A (zh) * 2016-04-20 2016-08-17 吕忠华 一种医学用智能化息怒提示设备
CN107071154A (zh) * 2017-03-22 2017-08-18 广东小天才科技有限公司 一种通话过程中的提示方法及移动设备
WO2021119910A1 (zh) * 2019-12-16 2021-06-24 瑞声声学科技(深圳)有限公司 一种触觉反馈分享方法、装置及系统

Also Published As

Publication number Publication date
JP5952374B2 (ja) 2016-07-13
US20180143692A1 (en) 2018-05-24
US20120001749A1 (en) 2012-01-05
KR101655055B1 (ko) 2016-09-06
WO2010059513A3 (en) 2010-11-18
EP2350776A2 (en) 2011-08-03
KR20150119493A (ko) 2015-10-23
JP5643214B2 (ja) 2014-12-17
CN104571535B (zh) 2018-03-23
US8390439B2 (en) 2013-03-05
CN102216876A (zh) 2011-10-12
US10289201B2 (en) 2019-05-14
US8004391B2 (en) 2011-08-23
KR20110088520A (ko) 2011-08-03
KR101800992B1 (ko) 2017-12-20
US20130225261A1 (en) 2013-08-29
WO2010059513A2 (en) 2010-05-27
KR20160105991A (ko) 2016-09-08
CN102216876B (zh) 2015-03-18
KR101600126B1 (ko) 2016-03-04
JP2015062676A (ja) 2015-04-09
US20100123588A1 (en) 2010-05-20
US9841816B2 (en) 2017-12-12
JP2012509145A (ja) 2012-04-19

Similar Documents

Publication Publication Date Title
CN102216876B (zh) 用于生成基于心情的触觉反馈的方法和装置
US10416774B2 (en) Automatic remote sensing and haptic conversion system
CN104007818B (zh) 具有本能警告的移动设备
JP6482765B2 (ja) 触覚効果のパラメータを修正するためのシステムおよび方法
US20180374381A1 (en) Craving input and support system
CN107948740A (zh) 视频播放控制方法、装置及终端
CN104182036A (zh) 基于媒体内容和一个或多个外部参数提供触觉反馈的方法及装置
CN108346469A (zh) 用于确定人体健康状况的方法及移动终端
CN116917923A (zh) 内容推荐系统、内容推荐方法、内容库、用于生成内容库的方法和目标输入用户接口
CN109471524A (zh) 一种控制马达振动的方法及移动终端
CN107862013B (zh) 一种日程查找方法和移动终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180323

Termination date: 20201113

CF01 Termination of patent right due to non-payment of annual fee