CN108702523A - 一种用户情绪显示方法、系统及用户情绪显示设备 - Google Patents

一种用户情绪显示方法、系统及用户情绪显示设备 Download PDF

Info

Publication number
CN108702523A
CN108702523A CN201780009005.2A CN201780009005A CN108702523A CN 108702523 A CN108702523 A CN 108702523A CN 201780009005 A CN201780009005 A CN 201780009005A CN 108702523 A CN108702523 A CN 108702523A
Authority
CN
China
Prior art keywords
information
degree
heart
display
organism
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780009005.2A
Other languages
English (en)
Other versions
CN108702523B (zh
Inventor
龚梅军
梁杰
范欣薇
孟亚斌
刘洪涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Hetai Intelligent Home Appliance Controller Co ltd
Original Assignee
Shenzhen Het Data Resources and Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Het Data Resources and Cloud Technology Co Ltd filed Critical Shenzhen Het Data Resources and Cloud Technology Co Ltd
Publication of CN108702523A publication Critical patent/CN108702523A/zh
Application granted granted Critical
Publication of CN108702523B publication Critical patent/CN108702523B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4888—Data services, e.g. news ticker for displaying teletext characters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Biomedical Technology (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Chemical & Material Sciences (AREA)
  • Psychology (AREA)
  • Marketing (AREA)
  • Neurosurgery (AREA)
  • Computer Graphics (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Analytical Chemistry (AREA)
  • Social Psychology (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本申请涉及视频直播技术领域，公开了一种用户情绪显示方法、装置及系统，该用户情绪显示系统包括可穿戴装置、显示终端以及云端服务器，该方法包括：获取可穿戴装置采集的生物体震信息；从生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。从而使得持所述显示终端通过所述第一情绪度可以实时了解目标对象的情绪。

Description

一种用户情绪显示方法、系统及用户情绪显示设备
技术领域
本申请涉及视频直播技术领域，具体涉及一种用户情绪显示方法、用户情绪显示设备，以及应用该用户情绪显示方法的用户情绪显示系统。
背景技术
随着网络传输技术、无线近场通信技术以及移动终端数据处理技术的发展，网络直播，比如体育赛事直播或者有线视讯的直播等，成为用户越来越青睐的节目观看方式。用户可以借助无线网络数据传输，随时随地观看喜欢的直接节目。
网络视频直播是有视频媒体的高端形态。从信息传播的角度来看，直播可以让用户与直播现场实时地连接，提供真实直接的视频观看体验。因为真实性，直播节目的不可预料性对用户来说很有吸引力，带给用户想象空间和惊喜。而其强大的互动性也拉近了粉丝和主播的距离。
但是现有的网络直播技术领域，技术开发关注点还是在直播流数据或者优化网络传输上，并未针对直播频道的内容提供相应体验更好的互动。并且，对于很多内向不善于表达的直播观众，即使设置了直播互动环节，对于内向的观众来说也很难参与到直播互动环节。并且，直播观众在互动环节的互动信息过于随意，互动环节对直播用户来说吸引力不大，并且互动过程无法成为指导直播内容的直播平台的可挖掘信息。
因此，现有技术的网络直播技术还有待于改进。
发明内容
本申请针对以上要解决的技术问题，提供一种用户情绪显示方法、系统及用户情绪显示设备，通过可穿戴装置获取用户的生物体震信息，并从生物体震信息中提取心冲击信息(Ballistocardiography，BCG)，再从该心冲击信息中提取出心冲击特征信息，基于心冲击特征信息查询确定用户当前真实的情绪度，为直播平台等提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验。
第一方面，本申请实施例提供了一种用户情绪显示方法，所述用户情绪显示方法应用于用户情绪显示系统，所述用户情绪显示系统包括可穿戴装置以及显示终端，所述方法包括：
获取所述可穿戴装置采集的生物体震信息；
从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；
对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；
根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。
在一些实施例中，所述方法还包括：
从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；
对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；
基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。
在一些实施例中，所述方法还包括：
从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；
对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；
利用所述第三情绪度修正所述目标情绪度。
在一些实施例中，所述从所述生物体震信息中提取心冲击信息，包括：
从所述生物体震信息中分离出呼吸信息；
对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
在一些实施例中，所述使所述显示终端实时显示所述目标情绪度，包括：
根据请求的直播频道对用户进行分组；
获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；
在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；
在所述滚动显示窗口中，根据所述时间戳滚动显示接收的所述目标情绪度对应的文字或者动图。
第二方面，本申请实施例还提供了一种用户情绪显示装置，所述装置包括：
生物体震信息获取单元，用于获取可穿戴装置采集的生物体震信息；
心冲击信息提取单元，用于从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；
心冲击特征信息提取单元，用于对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；
目标情绪度确定单元，用于根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至显示终端，使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。
在一些实施例中，所述装置还包括：
呼吸信息提取单元，用于从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；
第二情绪度确定单元，用于对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；
第一修正单元，用于基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。
在一些实施例中，所述装置还包括：
体动信息提取单元，用于从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；
第三情绪度确定单元，用于对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；
第二修正单元，用于利用所述第三情绪度修正所述目标情绪度。
在一些实施例中，所述心冲击信息提取单元从所述生物体震信息中提取心冲击信息，包括：
从所述生物体震信息中分离出呼吸信息；
对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
在一些实施例中，所述目标情绪度确定单元使所述显示终端实时显示所述目标情绪度，包括：
根据请求的直播频道对用户进行分组；
获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；
在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；
在所述滚动显示窗口中，根据所述时间戳滚动显示接收的所述目标情绪度对应的文字或者动图。
第三方面，本申请实施例还提供了一种用户情绪显示设备，该用户情绪显示设备包括：处理器、存储器、通信接口和总线；所述处理器、所述存储器和所述通信接口通过所述总线连接并完成相互间的通信；所述存储器存储可执行程序代码；所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以执行如上所述的用户情绪显示方法。
第四方面，本申请实施例还提供了一种计算机可读存储介质，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如上所述的用户情绪显示方法。
第五方面，本申请实施例还提供了一种用户情绪显示系统，包括可穿戴装置、显示终端以及云端服务器，所述可穿戴装置连接显示终端，所述显示终端连接云端服务器；
所述可穿戴装置用于采集用户的生物体震信息；
所述显示终端包括第一处理器与第一存储器，所述第一处理器分别与所述第一存储器及所述云端服务器连接，所述第一存储器存储有可被所述第一处理器执行的指令，所述指令被所述第一处理器执行，以使所述第一处理器执行：获取所述可穿戴装置采集的用户的生物体震信息，并将所述生物体震信息转发至所述云端服务器；
所述云端服务器包括第二处理器与第二存储器，所述第二处理器分别与所述第二存储器及所述显示终端连接，所述第二存储器存储有可被所述第二处理器执行的指令，所述指令被所述第二处理器执行，以使所述第二处理器执行：接收所述显示终端转发的所述生物体震信息；从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度；
所述第一处理器还用于执行控制所述显示终端的显示器实时显示所述目标情绪度。
在一些实施例中，所述第二处理器还用于执行：
从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；
对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；
基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。
在一些实施例中，所述第二处理器还用于执行：
从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；
对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；
利用所述第三情绪度修正所述目标情绪度。
在一些实施例中，所述第二处理器执行从所述生物体震信息中提取心冲击信息，包括：
从所述生物体震信息中分离出呼吸信息；
对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
在一些实施例中，所述第二处理器还用于执行：根据请求的直播频道对用户进行分组；
所述第一处理器执行控制所述显示终端的显示器实时显示所述目标情绪度包括：获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；在所述滚动显示窗口中，根据所述时间戳控制所述显示终端的显示器滚动显示接收的所述目标情绪度对应的文字或者动图。
第六方面，本申请实施例还提供了一种计算机程序产品，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被云端服务器执行时，使所述云端服务器执行如上所述的用户情绪显示方法。
第七方面，本申请实施例还提供了一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使云端服务器执行如上所述的用户情绪显示方法。
本申请的有益效果在于，本申请实施例提供的用户情绪显示方法、系统及用户情绪显示设备，在可穿戴装置上安装体震传感器，比如加速度传感器、陀螺仪、压阻式传感器或者生物电极，该可穿戴装置获取用户的生物体震信息后，连接可穿戴装置的显示终端将获取的生物体震信息转发至云端服务器，该云端服务器从生物体震信息中提取心冲击信息，再从该心冲击信息中提取出心冲击特征信息，基于该心冲击特征信息查询确定佩戴可穿戴装置的用户当前真实的情绪度，为直播平台提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验，使直播平台的直播界面更具娱乐性、可观赏性、互动性、氛围更强烈。并且，本申请实施例提供的用户情绪显示方法、系统及用户情绪显示设备可以基于体震传感器采集的真实生物体震信息，以及反映用户真实兴奋度的情绪度大数据，搜集、分析以及整理若干直播用户产生的情绪度文字或者动态图像生成参考信息，基于参考信息优化直播系统，比如做直播用户人群节目分类或者帮助直播平台细化服务内容。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。
图1是本申请实施例提供的用户情绪显示系统的系统框架图；
图2是本申请实施例提供的用户情绪显示系统的可穿戴装置的硬件结构图；
图3是本申请实施例提供的用户情绪显示系统的显示终端的模块结构图；
图4是本申请实施例提供的用户情绪显示系统的显示终端直播界面示意图；
图5是本申请实施例提供的用户情绪显示系统的云端服务器的模块结构图；
图6是本申请实施例提供的用户情绪显示方法的主要流程图；
图7是本申请实施例提供的用户情绪显示方法的另一流程图；
图8是本申请实施例提供的用户情绪显示装置的示意图；
图9是本申请实施例提供的用户情绪显示设备硬件结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本申请，并不用于限定本申请。
本申请实施例提供的用户情绪显示方法以及系统，涉及可穿戴装置、显示终端以及云端服务器，该可穿戴装置与显示终端无线连接或者有线连接，该显示终端与云端服务器通过有线或者无线网络进行数据通信。本申请实施例在可穿戴装置上安装体震传感器，比如加速度传感器、陀螺仪、压阻式传感器或者生物电极，该可穿戴装置获取用户的生物体震信息(如基于时域获取用户的生物体震信息)后，连接可穿戴装置的显示终端将获取的生物体震信息转发至云端服务器，该云端服务器从生物体震信息中提取心冲击信息，心冲击信息是一种被广泛的研究的生物体震信息。再从该心冲击信息中提取出心冲击特征信息，基于该心冲击特征信息查询确定佩戴可穿戴装置对应用户当前真实的情绪度。同时，在显示终端请求直播数据时，在显示终端的直播界面中播放直播内容时同步滚动显示观看同一直播频道的所有用户的表征其情绪度的文字或者动态图像，为直播平台提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验。
请参考图1，为本申请实施例提供的用户情绪显示系统。该用户情绪显示系统包括若干可穿戴装置、若干显示终端以及云端服务器300。其中，所述若干可穿戴装置包括有可穿戴装置100-1，…，可穿戴装置100-n。所述若干显示终端包括有显示终端200-1，…，显示终端200-n。所述可穿戴装置100-1连接对应的显示终端200-1，类似的，所述可穿戴装置100-n连接对应的显示终端200-n。所述显示终端200-1，…，显示终端200-n均连接云端服务器300，并且，所述显示终端200-1，…，显示终端200-n均可接收该云端服务器300的直播视频数据。所述云端服务器300也是直播平台的服务器，同时所述云端服务器300还可提供直播视频流数据。
以下介绍以可穿戴装置100-1和显示终端200-1为例加以说明。
请参考图2，本申请实施例中的可穿戴装置100-1为了获取用户的生物体震信息，设置有体震传感器50。所述体震传感器50可以为贴近心脏直接接触人体的电极或者传感器，也可以是不直接接触人体的体震传感器。其中，直接接触人体的电极或者传感器目前使用普遍，测量心率时需要使用电极或传感器直接接触人体，会对人体产生一定约束。而不直接接触人体的体震传感器，比如加速度传感器和/或陀螺仪传感器，可以不直接与人体接触而获取得到心脏跳动对人体产生的微弱震动信号，即生物体震信息。然后，通过对所述生物体震信息进行信号分析，便可达到不直接接触人体即可无感觉测量心率的效果。或者，所述体震传感器50也可以采用压阻式传感器，当心脏向外泵血时，身体就会产生与促使血液流动的力相反的反作用力，该反作用力可以在体表上通过敏感的力传感器测量出来。
在一些实施例中，该体震传感器50还可以是聚偏氟乙烯制作的传感器、重力传感器、织物电极、位移传感器、压电电缆、光电传感器或生物电电极。其中，生物电电极可以为氯化银电极(Ag/AgCl/Cl-)，该氯化银电极可用于检测基本生物体震信息，再通过心率变异性(Heart Rate Variability，HRV)分析换算为人的情绪度,亦即兴奋程度。
其中，心率变异性是指逐次心跳间期，亦即瞬时心率，之间存在的微小差异或微小涨落现象。心率变异性分析是把心搏的微小变化，转换为波形方式进行分析，将人体自主神经对于压力的应急反应可视化，以实时确认人的健康状况或者精神、生理上的稳定状态。
具体的，所述可穿戴装置100-1包括带有存储器的可穿戴装置处理器10、语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器50。所述可穿戴装置处理器10分别与所述语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器50连接，该连接可以为通信连接。所述可穿戴装置100-1通过所述无线通信模块40与无线连接的显示终端200-1通信。其中，其它可穿戴装置100-2至可穿戴装置100-n的结构与所述可穿戴装置100-1的结构相同，因此，在此处不赘述。
其中，所述体震传感器50可以为内嵌的加速度传感器或者陀螺仪传感器，对人体震动的微弱信息也即生物体震信息进行采样。例如，对心冲击运动图、呼吸运动、体动等基础信息基于时域进行采样。并且，所述可穿戴装置100-1将采样数据发送至连接的显示终端200-1。具体的，所述体震传感器50将采集数据发送至所述可穿戴装置处理器10，再通过所述无线通信模块40将所述采样数据发送至连接的显示终端200-1。类似的，所述可穿戴装置100-2将采样数据发送至连接的显示终端200-2，…，所述可穿戴装置100-n将采样数据发送至连接的显示终端200-n。
所述显示终端200-1，…，显示终端200-n接收到所述生物体震信息后，分别将所述生物体震信息发送至云端服务器300，以便所述云端服务器300进行运算处理形成对应用户的情绪度，亦称兴奋度。
可以理解的是，在一些实施例中，对于所述生物体震信息的运算处理，也可以在可穿戴装置100-1，…，可穿戴装置100-n中进行，以得到对应用户的情绪度，并将所述情绪度发送至所述显示终端200-1，…，显示终端200-n；然后，所述显示终端200-1，…，显示终端200-n将所述情绪度转发至所述云端服务器300。或者，在所述显示终端200-1，…，显示终端200-n进行运算处理，以得到所述情绪度，并将所述情绪度反馈至所述云端服务器300。
所述显示终端200-1在请求直播数据时，所述云端服务器300向所述显示终端200-1发送直播视频数据，同时，所述云端服务器300计算同一直播频道下所有用户的情绪度，并将所述所有用户的情绪度发送至请求的显示终端200-1。类似的，所述云端服务器300将所述所有用户的情绪度发送至请求的显示终端200-2，…，所述云端服务器300将所述所有用户的情绪度发送至请求的显示终端200-n，以便在每个显示终端中均可看到所有用户的情绪度。例如，在进行直播时，直播的主播持有所述显示终端200-1，听众A持有所述显示终端200-2，听众B持有所述显示终端200-n，则主播、听众A以及听众B均可通过各自所持的显示终端，了解到主播、听众A以及听众B的情绪度，以便为直播平台提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验。
请一并参考图4，所述显示终端200-1创建直播界面400，所述直播界面400包括视频窗口410以及滚动显示窗口420。所述显示终端200-1在所述视频窗口410播放直播视频数据，在所述滚动显示窗口420滚动显示所有用户对直播内容的兴奋度。
本申请实施例提供的用户情绪显示方法，通过分析由硬件传感器检测的生物体震信息，推导出情绪度和兴奋度，再将情绪度或者兴奋度与直播平台进行联动，实现在直播平台上滚动显示同一直播频道的观看用户的真实情感响应度，内容粘性大，数据更真实，使直播平台更具有吸引力。
实施例1
以下具体介绍该用户情绪显示系统。
如图2所示，所述可穿戴装置100-1包括带有存储器的可穿戴装置处理器10、语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器50。所述可穿戴装置处理器10分别与所述语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器50连接，该连接可以为通信连接。所述可穿戴装置100-1通过所述无线通信模块40与无线连接的显示终端200-1通信。其中，其它可穿戴装置100-2至可穿戴装置100-n的结构与所述可穿戴装置100-1的结构相同，因此，在此处不赘述。
首先，所述体震传感器50，比如加速度传感器或者陀螺仪传感器用于采集用户的生物体震信息，具体的，负责采集接收人体心冲击图信息、呼吸信息、身体运动信息等生物体震信息。所述语音输入组件20负责采集及播放音频信息。然后，所述可穿戴装置处理器10负责将所述体震传感器50所采集到生物体震信息(心冲击图信息、呼吸信息、身体运动信息等)以及所述语音输入组件20所采集到音频信息转换成传输标准数据包，再将所述传输标准数据包打包发送给所述无线通信模块40。最后，所述无线通信模块40负责将传输标准数据包(包括生物体震信息及音频信息)通过无线传输方式发送到所述显示终端200-1。并且，所述声光/振动指示组件30通过声光、震动等方式为用户提供可视或可感受的提示信息。其中，所述语音输入组件20可以包括麦克风等；所述声光/振动指示组件30可以包括声光指示灯及振动马达等。所述无线通信模块40可为蓝牙通信模块等。
为了实现直播同时滚动显示所有用户真实的观看感受，所述可穿戴装置100-1基于时域，获取用户的生物体震信息，并由所述显示终端200-1将所述生物体震信息转发给所述云端服务器。所述云端服务器300从所述生物体震信息，提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；以及用于对每一心冲击信息帧进行频域分析提取该心冲击信息的心冲击特征信息，根据该心冲击特征信息查询心冲击特征信息与情绪度对照库，查询确定目标情绪度。所述显示终端200-1实时滚动显示该目标情绪度。其中，所述目标情绪度为与该心冲击特征信息对应的第一情绪度。
其中，所述心冲击特征信息实施例具体介绍如下：所述心冲击特征信息从心冲击信息(Ballistocardiogram，BCG)中提取得到的特征信息。例如，所述心冲击特征信息可以为HRV的频域和时域参数：RR间期(RRI)、全部窦性心搏RR间期的标准差(standarddiviation of NN intervals,SDNN)、高频(High Frequency，HF)、低频(Low Frequency，HF)、LF/HF和总功率(TP)等。计算单位时段的参数值，记录每种参数的变化趋势，并与心冲击信息提取模块331中记录的、现有研究中已知的基本情绪状态的HRV参数RRI、SDNN、HF、LF、LF/HF和TP进行比对，结合心冲击特征信息与情绪度对照库，便可确定目标情绪度。
同时，为了从所述生物体震信息中提取更多的用户参数，所述云端服务器300从所述生物体震信息中分离出呼吸信息；对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。其中，结合呼吸信息可以分析出用户更多的心冲击特征信息，以使情绪度推算更准确。例如，所述云端服务器300可从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；以及对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；所述第二情绪度用于修正所述目标情绪度。通过呼吸信息分析出用户更多的心冲击特征信息，从而使得更准确反映用户的情绪。
请参考图3，本实施例的显示终端200-1包括第一处理器210、第一存储器220、蓝牙模块230、无线网络模块240及显示器250。所述第一处理器210分别与所述第一存储器220、蓝牙模块230、无线网络模块240及显示器250连接，该连接可以为通信连接。并且，所述第一处理器210还与所述可穿戴装置100-1及云端服务器300连接，所述第一处理器210通过所述蓝牙模块230与无线连接的可穿戴装置100-1通信，通过所述无线网络模块240与无线连接的云端服务器300进行通信。其中，其它显示终端200-2至显示终端200-n的结构与所述显示终端200-1的结构相同，因此，在此处不赘述。
所述第一存储器220存储有可被所述第一处理器210执行的指令，所述指令可被所述第一处理器210执行。当所述指令被所述第一处理器210执行，以使所述第一处理器210执行：获取所述可穿戴装置采集的用户的生物体震信息，并将所述生物体震信息转发至所述云端服务器；以及控制显示器实时显示来自所述云端服务器发送的所述目标情绪度。
所述第一处理器210执行控制显示器实时显示所述目标情绪度，具体包括：获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；在所述滚动显示窗口中，根据所述时间戳控制显示器滚动显示接收的所述目标情绪度对应的文字或者动图。其中，为了合理显示所述目标情绪度对应的文字或者动图，采用先接收的先显示的方式显示于所述滚动显示窗口420。
其中，所述第一处理器210获取相同直播频道下所有用户的目标情绪度的每一目标情绪度的产生过程为：所述云端服务器300从所述生物体震信息提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息，并根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，查询得到每一目标情绪度。
请参考图5，本实施例的云端服务器300通过网络连接若干显示终端。所述云端服务器300包括第二处理器310与第二存储器320，所述第二处理器310分别与所述第二存储器320及所述显示终端200-1，…，显示终端200-n连接，该连接可以为通信连接。
所述第二存储器320存储有可被所述第二处理器310执行的指令，所述指令被所述第二处理器310执行，以使所述第二处理器执行：接收所述显示终端转发的所述生物体震信息；从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。
其中，为了从所述生物体震信息中提取准确的用户参数，更准确反映用户的情绪，所述第二处理器310还用于执行：从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。通过呼吸信息分析出用户更多的心冲击特征信息，从而使得更准确反映用户的情绪。其中，所述第二处理器310执行从所述生物体震信息中提取心冲击信息，具体包括：从所述生物体震信息中分离出呼吸信息；对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
并且，为了从所述生物体震信息中提取准确的用户参数，进一步的更准确反映用户的情绪，所述第二处理器还用于执行：从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；利用所述第三情绪度修正所述目标情绪度。
所述第二处理器310还用于执行：根据请求的直播频道对用户进行分组。具体的，用户可以通过所述云端服务器300进行用户注册，所述云端服务器300再根据请求的直播频道对注册的用户进行分组。用户通过所述显示终端200-1请求直播视频数据时，所述第二处理器310向请求显示终端200-1提供直播视频数据，并将相同直播频道分组中所有用户的目标情绪度发送至所述显示终端200-1。以便于所述显示终端200-1创建直播界面400，并在视频窗口410播放直播视频数据，同时在该滚动显示窗口420实时滚动显示所有用户对直播内容的兴奋度。
本实施例的用户情绪显示系统，将情绪度或者兴奋度与直播平台进行联动，实现在直播平台上实时滚动显示同一直播频道的观看用户的真实情感响应度，内容粘性大，数据更真实。
实施例2
请参考图6，为本申请实施例提供的用户情绪显示方法的流程示意图，所述用户情绪显示方法应用于用户情绪显示系统，所述用户情绪显示系统包括可穿戴装置、显示终端以及云端服务器。所述用户情绪显示方法可由所述云端服务器、可穿戴设备或显示终端执行，本申请实施例不做限定。
其中，所述用户情绪显示方法主要包括以下步骤：
步骤101：获取所述可穿戴装置采集的生物体震信息。
其中，所述生物体震信息可以为所述可穿戴装置基于时域采集的用户的生物体震信息。所述可穿戴装置采集到所述生物体震信息后，可将所述生物体震信息发送至所述显示终端，再又所述显示终端转发所述生物体震信息，所述云端服务器便可接收所述显示终端转发的所述生物体震信息，从而获取得到所述生物体震信息。
步骤102：从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧。
所述从所述生物体震信息中提取心冲击信息，具体包括：从该生物体震信息中分离出呼吸信息；对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
步骤103：对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息。
其中，所述心冲击特征信息可以为HRV的频域和时域参数：RRI、SDNN、HF、LF、LF/HF和TP等。
步骤104：根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。
所述云端服务器确定目标情绪度后，将所述目标情绪度发送至所述显示终端，以便可在所述显示终端实时显示所述目标情绪度，从而使得持有所述显示终端可了解目标用户的情绪度。所述使所述显示终端实时显示所述目标情绪度，具体包括：根据请求的直播频道对用户进行分组；获取相同直播频道下所有用户的目标情绪度，并记录时间戳；在直播界面设置视频窗口以及滚动显示窗口；在所述滚动显示窗口中，根据时间戳滚动显示接收的目标情绪度对应的文字或者动图。其中，为了合理显示接收的目标情绪度对应的文字或者动图，可以采用先接收的先显示的方式显示于所述滚动显示窗口。
请参考图7，为了从所述生物体震信息中提取准确的用户参数，在实施图6所示方法步骤将所述目标情绪度发送至所述显示终端，使所述显示终端实时显示所述目标情绪度后，还可从所述生物体震信息中提取其它心冲击特征信息来修正该目标情绪度以获取更准确更真实的表述。比如，从该生物体震信息中提取体动信息和呼吸信息。具体包括：
步骤202：从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；
步骤203：对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；
步骤204：基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。
进一步地，该方法还包括，
步骤302：从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；
步骤303：对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；
步骤304：利用所述第三情绪度修正所述目标情绪度。
需要说明的是，在一些实施例中，所述用户情绪显示方法还可由可穿戴装置或显示终端执行。当所述用户情绪显示方法被所述可穿戴装置执行时，所述步骤101获取所述可穿戴装置采集的生物体震信息表示为：采集所述生物体震信息；当所述用户情绪显示方法被所述显示终端执行时，所述步骤104根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度表示为：根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。
本申请的用户情绪显示方法和系统，通过分析由硬件传感器检测的生物体震信息，并推导出相同直播频道下所有用户的情绪度和兴奋度，将情绪度或者兴奋度与直播平台进行联动，实现在直播平台上滚动显示同一直播频道的观看用户的真实情感响应度，数据真实。本实施例并将情绪兴奋程度通过屏幕的部分空间实时滚动的显示出来,数据真实，可互动性更强。可实现直播对采集的反映用户真实情绪的用户参数进行分析用于指导直播内容的制作，使得直播内容更受欢迎，或者做节目分类，从用户真实体验的角度细化直播平台的直播内容。
实施例3
请参考图8，为本申请实施例提供的用户情绪显示装置的示意图。所述用户情绪显示装置可以配置在云端服务器中。
参照图8，所述用户情绪显示装置80包括：
生物体震信息获取单元801，用于获取可穿戴装置采集的生物体震信息。
其中，所述生物体震信息可以为所述可穿戴装置基于时域采集的用户的生物体震信息。所述可穿戴装置采集到所述生物体震信息后，可将所述生物体震信息发送至所述显示终端，再又所述显示终端转发所述生物体震信息，所述生物体震信息获取单元801便可接收所述显示终端转发的所述生物体震信息，从而获取得到所述生物体震信息。
心冲击信息提取单元802，用于从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧。
所述心冲击信息提取单元802从所述生物体震信息中提取心冲击信息，具体包括：从该生物体震信息中分离出呼吸信息；对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
心冲击特征信息提取单元803，用于对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息。
其中，所述心冲击特征信息可以为HRV的频域和时域参数：RRI、SDNN、HF、LF、LF/HF和TP等。
目标情绪度确定单元804，用于根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至显示终端，使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。
所述目标情绪度确定单元804确定目标情绪度后，将所述目标情绪度发送至所述显示终端，以便可在所述显示终端实时显示所述目标情绪度，从而使得持有所述显示终端可了解目标用户的情绪度。所述目标情绪度确定单元804使所述显示终端实时显示所述目标情绪度，具体包括：根据请求的直播频道对用户进行分组；获取相同直播频道下所有用户的目标情绪度，并记录时间戳；在直播界面设置视频窗口以及滚动显示窗口；在所述滚动显示窗口中，根据时间戳滚动显示接收的目标情绪度对应的文字或者动图。其中，为了合理显示接收的目标情绪度对应的文字或者动图，可以采用先接收的先显示的方式显示于所述滚动显示窗口。
在本申请实施例中，所述用户情绪显示装置80还包括：
呼吸信息提取单元805，用于从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧。
第二情绪度确定单元806，用于对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度。
第一修正单元807，用于基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。
体动信息提取单元808，用于从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧。
第三情绪度确定单元809，用于对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度。
第二修正单元810，用于利用所述第三情绪度修正所述目标情绪度。
需要说明的是，在本申请实施例中，所述用户情绪显示装置80可执行本申请实施例2提供的用户情绪显示方法，具备执行方法相应的功能模块和有益效果。未在用户情绪显示装置80的实施例中详尽描述的技术细节，可参见本申请实施例2提供的用户情绪显示方法。
实施例4
图9是本申请实施例提供的用户情绪显示设备硬件结构图，如图9所示，所述音视频测试设备90包括：处理器901、存储器902、通信接口(图未示)和总线。所述处理器901、所述存储器902和所述通信接口通过所述总线连接并完成相互间的通信；所述存储器存储可执行程序代码；所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以执行如上所述的用户情绪显示方法。
一个或多个处理器901以及存储器902，图9中以一个处理器901为例。
处理器901、存储器902和所述通信接口可以通过总线或者其他方式连接，图9中以通过总线连接为例。
存储器902作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行指令。处理器901通过运行存储在存储器902中的非易失性软件程序、指令，从而执行用户情绪显示设备90的各种功能应用以及数据处理，即实现所述方法实施例的用户情绪显示方法。
存储器902可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据用户情绪显示设备90使用所创建的数据等。此外，存储器902可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器902可选包括相对于处理器901远程设置的存储器，这些远程存储器可以通过网络连接至用户情绪显示设备90。所述网络的实施例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个指令存储在所述存储器902中，当被所述一个或者多个处理器901执行时，执行所述任意方法实施例的用户情绪显示方法，例如，执行以上描述的图6中的方法步骤101至步骤104。
所述用户情绪显示设备90可执行本申请实施例所提供的用户情绪显示方法，具备执行方法相应的功能模块和有益效果。未在用户情绪显示设备实施例中详尽描述的技术细节，可参见本申请实施例所提供的用户情绪显示方法。
本申请实施例提供了一种计算机程序产品，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被用户情绪显示设备90执行时，使所述用户情绪显示设备90执行如上所述的用户情绪显示方法。例如，执行以上描述的图6中的方法步骤101至步骤104。
本申请实施例提供了一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行，执行如上所述的用户情绪显示方法。例如，执行以上描述的图6中的方法步骤101至步骤104。
综上所述，本申请实施例提供的用户情绪显示方法、系统及户情绪显示设备，在可穿戴装置上安装体震传感器，比如加速度传感器、陀螺仪、压阻式传感器或者生物电极，使可穿戴装置设计简单、使用方便；该可穿戴装置基于时域获取用户的生物体震信息后，连接可穿戴装置的显示终端将获取的生物体震信息转发至云端服务器，该云端服务器从生物体震信息中提取心冲击信息，再从该心冲击信息中提取出心冲击特征信息，基于该心冲击特征信息查询确定佩戴可穿戴装置的用户当前真实的情绪度，并随着直播内容同步显示表征该情绪度的文字或者动态图像，为直播平台提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验；本实施例的用户情绪显示方法、系统及户情绪显示设备，将情绪度或者兴奋度与直播平台进行联动，使直播平台的直播界面更具娱乐性、可观赏性、互动性、氛围更强烈；并且，本实施例用户情绪显示方法、系统及户情绪显示设备，基于体震传感器采集的真实生物体震信息，反映用户真实兴奋度的情绪度大数据，可使内向不善于表达真实想法的用户把自己的兴奋度直接展示出来；而且，通过搜集、分析以及整理若干直播用户产生的情绪度文字或者动态图像生成参考信息，可优化直播内容，比如做直播用户人群节目分类或者帮助直播平台细化服务内容。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
通过以上的实施方式的描述，本领域普通技术人员可以清楚地了解到各实施方式可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。
最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；在本申请的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本申请的不同方面的许多其它变化，为了简明，它们没有在细节中提供；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (12)

1.一种用户情绪显示方法，其特征在于，所述用户情绪显示方法应用于用户情绪显示系统，所述用户情绪显示系统包括可穿戴装置以及显示终端，所述方法包括：
获取所述可穿戴装置采集的生物体震信息；
从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；
对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；
根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；
对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；
基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；
对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；
利用所述第三情绪度修正所述目标情绪度。
4.根据权利要求1-3任意一项所述的方法，其特征在于，所述从所述生物体震信息中提取心冲击信息，包括：
从所述生物体震信息中分离出呼吸信息；
对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
5.根据权利要求4所述的方法，其特征在于，所述使所述显示终端实时显示所述目标情绪度，包括：
根据请求的直播频道对用户进行分组；
获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；
在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；
在所述滚动显示窗口中，根据所述时间戳滚动显示接收的所述目标情绪度对应的文字或者动图。
6.一种用户情绪显示设备，其特征在于，包括：处理器、存储器、通信接口和总线；所述处理器、所述存储器和所述通信接口通过所述总线连接并完成相互间的通信；所述存储器存储可执行程序代码；所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序，以执行如权利要求1-5任一项所述的方法。
7.一种计算机可读存储介质，其特征在于，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如权利要求1-5任一项所述的方法。
8.一种用户情绪显示系统，其特征在于，包括可穿戴装置、显示终端以及云端服务器，所述可穿戴装置连接显示终端，所述显示终端连接云端服务器；
所述可穿戴装置用于采集用户的生物体震信息；
所述显示终端包括第一处理器与第一存储器，所述第一处理器分别与所述第一存储器、所述可穿戴装置及所述云端服务器连接，所述第一存储器存储有可被所述第一处理器执行的指令，所述指令被所述第一处理器执行，以使所述第一处理器执行：获取所述可穿戴装置采集的用户的生物体震信息，并将所述生物体震信息转发至所述云端服务器；
所述云端服务器包括第二处理器与第二存储器，所述第二处理器分别与所述第二存储器及所述显示终端连接，所述第二存储器存储有可被所述第二处理器执行的指令，所述指令被所述第二处理器执行，以使所述第二处理器执行：接收所述显示终端转发的所述生物体震信息；从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度；
所述第一处理器还用于执行控制所述显示终端的显示器实时显示所述目标情绪度。
9.根据权利要求8所述的用户情绪显示系统，其特征在于，所述第二处理器还用于执行：
从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；
对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；
基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。
10.根据权利要求9所述的用户情绪显示系统，其特征在于，所述第二处理器还用于执行：
从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；
对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；
利用所述第三情绪度修正所述目标情绪度。
11.根据权利要求8-10任意一项所述的用户情绪显示系统，其特征在于，所述第二处理器执行从所述生物体震信息中提取心冲击信息，包括：
从所述生物体震信息中分离出呼吸信息；
对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。
12.根据权利要求11所述的用户情绪显示系统，其特征在于，
所述第二处理器还用于执行：根据请求的直播频道对用户进行分组；
所述第一处理器执行实时显示所述目标情绪度包括：获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；在所述滚动显示窗口中，根据所述时间戳控制所述显示终端的显示器滚动显示接收的所述目标情绪度对应的文字或者动图。
CN201780009005.2A 2017-12-29 2017-12-29 一种用户情绪显示方法、系统及用户情绪显示设备 Active CN108702523B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/120254 WO2019127523A1 (zh) 2017-12-29 2017-12-29 一种用户情绪显示方法、系统及用户情绪显示设备

Publications (2)

Publication Number Publication Date
CN108702523A true CN108702523A (zh) 2018-10-23
CN108702523B CN108702523B (zh) 2021-04-02

Family

ID=63844125

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780009005.2A Active CN108702523B (zh) 2017-12-29 2017-12-29 一种用户情绪显示方法、系统及用户情绪显示设备

Country Status (2)

Country Link
CN (1) CN108702523B (zh)
WO (1) WO2019127523A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109480813A (zh) * 2018-11-06 2019-03-19 北京理工大学 一种基于bcg原理的非接触式心率检测方法
CN110677685A (zh) * 2019-09-06 2020-01-10 腾讯科技（深圳）有限公司 网络直播显示方法及装置
CN112820323A (zh) * 2020-12-29 2021-05-18 平安银行股份有限公司 基于客户语音进行响应队列优先级调整方法及系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114598896A (zh) * 2022-02-17 2022-06-07 北京达佳互联信息技术有限公司 网络直播方法、装置、电子设备以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090133064A1 (en) * 2007-11-19 2009-05-21 Tetsuo Maruyama Information providing device, information acquisition terminal, broadcast receiving terminal, information providing system, information providing method, and program
CN104905803A (zh) * 2015-07-01 2015-09-16 京东方科技集团股份有限公司 可穿戴电子设备及其情绪监控方法
CN106175727A (zh) * 2016-07-25 2016-12-07 广东小天才科技有限公司 一种应用于可穿戴设备的表情推送方法及可穿戴设备
CN107197384A (zh) * 2017-05-27 2017-09-22 北京光年无限科技有限公司 应用于视频直播平台的虚拟机器人多模态交互方法和系统
CN107456218A (zh) * 2017-09-05 2017-12-12 清华大学深圳研究生院 一种情绪感测系统及可穿戴设备
KR101799702B1 (ko) * 2016-12-02 2017-12-20 주식회사 라투인 만물 인터넷을 융합한 생활 밀착형 가상현실 비즈니스 플랫폼과 그 운영방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090133064A1 (en) * 2007-11-19 2009-05-21 Tetsuo Maruyama Information providing device, information acquisition terminal, broadcast receiving terminal, information providing system, information providing method, and program
CN104905803A (zh) * 2015-07-01 2015-09-16 京东方科技集团股份有限公司 可穿戴电子设备及其情绪监控方法
CN106175727A (zh) * 2016-07-25 2016-12-07 广东小天才科技有限公司 一种应用于可穿戴设备的表情推送方法及可穿戴设备
KR101799702B1 (ko) * 2016-12-02 2017-12-20 주식회사 라투인 만물 인터넷을 융합한 생활 밀착형 가상현실 비즈니스 플랫폼과 그 운영방법
CN107197384A (zh) * 2017-05-27 2017-09-22 北京光年无限科技有限公司 应用于视频直播平台的虚拟机器人多模态交互方法和系统
CN107456218A (zh) * 2017-09-05 2017-12-12 清华大学深圳研究生院 一种情绪感测系统及可穿戴设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109480813A (zh) * 2018-11-06 2019-03-19 北京理工大学 一种基于bcg原理的非接触式心率检测方法
CN110677685A (zh) * 2019-09-06 2020-01-10 腾讯科技（深圳）有限公司 网络直播显示方法及装置
CN110677685B (zh) * 2019-09-06 2021-08-31 腾讯科技（深圳）有限公司 网络直播显示方法及装置
CN112820323A (zh) * 2020-12-29 2021-05-18 平安银行股份有限公司 基于客户语音进行响应队列优先级调整方法及系统
CN112820323B (zh) * 2020-12-29 2023-06-16 平安银行股份有限公司 基于客户语音进行响应队列优先级调整方法及系统

Also Published As

Publication number Publication date
CN108702523B (zh) 2021-04-02
WO2019127523A1 (zh) 2019-07-04

Similar Documents

Publication Publication Date Title
CN108702523A (zh) 一种用户情绪显示方法、系统及用户情绪显示设备
US10593167B2 (en) Crowd-based haptics
CN109298779B (zh) 基于虚拟代理交互的虚拟训练系统与方法
US9557814B2 (en) Biometric interface for a handheld device
Muñoz et al. PhysioVR: A novel mobile virtual reality framework for physiological computing
US20080281633A1 (en) Periodic evaluation and telerehabilitation systems and methods
CA2917927A1 (en) Intelligent device mode shifting based on activity
CN113694343A (zh) 一种基于vr技术的沉浸式抗压力心理训练系统及方法
CN109119057A (zh) 音乐创作方法、装置及存储介质和穿戴式设备
CN215875885U (zh) 一种基于vr技术的沉浸式抗压力心理训练系统
US20190138463A1 (en) Information processing apparatus, information processing method, and program
JP6150935B1 (ja) 情報処理システム、情報処理方法、および情報処理プログラム
US11941177B2 (en) Information processing device and information processing terminal
CN209203292U (zh) 一种用户情绪显示系统
WO2019200362A1 (en) Wearable multi-modal bio-sensing system
US20230009322A1 (en) Information processing device, information processing terminal, and program
CN101454805A (zh) 训练辅助设备、训练辅助方法和训练辅助程序
Cruz et al. Monitoring physiology and behavior using Android in phobias
JP6895143B2 (ja) イベント盛況度解析システム、サーバ、生体情報取得装置、イベント盛況度解析方法及びプログラム
JP7247811B2 (ja) リハビリ支援システム、リハビリ支援方法、およびリハビリ支援プログラム
KR102361994B1 (ko) 배틀 게임 시스템
WO2023188698A1 (ja) 評価方法、評価用装置、およびプログラム
EP4353152A1 (en) Medical image acquisition unit assistance apparatus
Rahmani et al. EmoWear: Wearable Physiological and Motion Dataset for Emotion Recognition and Context Awareness
PIGHINI Development and evaluation of an Android app to exploit smartphone-embedded camera and inertial sensors for monitoring of physiological parameters

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 518000 Guangdong science and technology innovation and Research Institute, Shenzhen, Shenzhen, Nanshan District No. 6, science and technology innovation and Research Institute, Shenzhen, D 10, 1004, 10

Patentee after: Shenzhen Hetai intelligent home appliance controller Co.,Ltd.

Address before: 518000 Guangdong science and technology innovation and Research Institute, Shenzhen, Shenzhen, Nanshan District No. 6, science and technology innovation and Research Institute, Shenzhen, D 10, 1004, 10

Patentee before: SHENZHEN H&T DATA RESOURCES AND CLOUD TECHNOLOGY Ltd.

CP01 Change in the name or title of a patent holder