CN106453051A - 多媒体交互系统 - Google Patents

多媒体交互系统 Download PDF

Info

Publication number
CN106453051A
CN106453051A CN201610886223.1A CN201610886223A CN106453051A CN 106453051 A CN106453051 A CN 106453051A CN 201610886223 A CN201610886223 A CN 201610886223A CN 106453051 A CN106453051 A CN 106453051A
Authority
CN
China
Prior art keywords
information
subsystem
interaction
user
multimedia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610886223.1A
Other languages
English (en)
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Innovation Import & Export Trading Co Ltd
Original Assignee
Shenzhen Innovation Import & Export Trading Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Innovation Import & Export Trading Co Ltd filed Critical Shenzhen Innovation Import & Export Trading Co Ltd
Priority to CN201610886223.1A priority Critical patent/CN106453051A/zh
Publication of CN106453051A publication Critical patent/CN106453051A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10Multimedia information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Social Psychology (AREA)
  • Physics & Mathematics (AREA)
  • Hospice & Palliative Care (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Psychology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明提供了多媒体交互系统,包括存储子系统、多媒体播放子系统、交互信息采集子系统、信息处理子系统;所述存储子系统用于存储与用户交互所需的交互脚本,交互脚本包括已预订播放方式和播放条件的多媒体数据;所述交互信息采集子系统,用于采集并输出用户的交互信息,交互信息包括用户的状态信息和用户所处环境的环境信息;所述信息处理子系统与所述存储子系统、多媒体播放子系统和交互信息采集子系统分别连接,用于根据所述交互信息调取所述交互脚本中的多媒体数据,并将所调取的多媒体数据输出至所述多媒体播放子系统。本发明能够减少辅导师的个人因素对培训、咨询、指导等服务效果的影响,能够提高服务效果的稳定性和有效性。

Description

多媒体交互系统
技术领域
本发明涉及多媒体应用领域,具体涉及多媒体交互系统。
背景技术
相关技术中,心理导师与被指导者需要面对面的交流,心理导师根据被指导者的状态确定与被指导者如何交流,以达到改善被指导者的心理健康的目的。在心理导师处于疲惫状态下,有可能出现偶尔的注意力不集中,从而容易疏忽被指导者通过肢体或语言表达的一些对指导非常有用的关键信息,从而导致指导效果欠佳。有些心理导师的指导经验不足,有可能无法很快捕捉到被指导者的真实焦虑点并无法有效地对症下药,从而导致被指导者体验较差。明显可见,完全依赖心理导师与被指导者的人人对话进行的心理指导,指导效果具有很大的不确定性。
发明内容
为解决上述问题,本发明旨在提供多媒体交互系统。
本发明的目的通过以下技术方案实现:
多媒体交互系统,包括存储子系统、多媒体播放子系统、交互信息采集子系统、信息处理子系统;所述存储子系统用于存储与用户交互所需的交互脚本,所述交互脚本包括已预订播放方式和播放条件的多媒体数据;所述交互信息采集子系统,用于采集并输出用户的交互信息,所述交互信息包括用户的状态信息和用户所处环境的环境信息;所述信息处理子系统与所述存储子系统、所述多媒体播放子系统和所述交互信息采集子系统分别连接,用于根据所述交互信息调取所述交互脚本中的多媒体数据,并将所调取的多媒体数据输出至所述多媒体播放子系统。
本发明的有益效果:通过信息处理子系统可以根据信息采集子系统采集的用户的交互信息,从存储子系统中调取交互脚本中的多媒体数据,通过多媒体播放子系统播放语音、视频等多媒体数据,完成与用户的交互,减少了辅导师的个人因素对培训、咨询、指导等服务效果的影响,能够提高服务效果的稳定性和有效性。
附图说明
利用附图对发明作进一步说明,但附图中的实施例不构成对本发明的任何限制,对于本领域的普通技术人员,在不付出创造性劳动的前提下,还可以根据以下附图获得其它的附图。
图1是本发明结构连接示意图;
图2是交互信息采集子系统的结构示意图。
附图标记:
交互信息采集子系统1、存储子系统2、多媒体播放子系统3、信息处理子系统4、数据采集单元11、数据处理单元12、数据传输单元13。
具体实施方式
结合以下实施例对本发明作进一步描述。
参见图1、图2,本实施例的多媒体交互系统,包括交互信息采集子系统1、存储子系统2、多媒体播放子系统3、信息处理子系统4;所述存储子系统2用于存储与用户交互所需的交互脚本,所述交互脚本包括已预订播放方式和播放条件的多媒体数据;所述交互信息采集子系统1,用于采集并输出用户的交互信息,所述交互信息包括用户的状态信息和用户所处环境的环境信息;所述信息处理子系统4与所述存储子系统2、所述多媒体播放子系统3和所述交互信息采集子系统1分别连接,用于根据所述交互信息调取所述交互脚本中的多媒体数据,并将所调取的多媒体数据输出至所述多媒体播放子系统3。
优选的,所述状态信息包括用户的姿态信息、语音信息、生理信息。
优选的,所述多媒体播放子系统3包括音频播放设备、视频播放设备。
本发明上述实施例通过信息处理子系统4可以根据信息采集子系统采集的用户的交互信息,从存储子系统2中调取交互脚本中的多媒体数据,通过多媒体播放子系统3播放语音、视频等多媒体数据,完成与用户的交互,减少了辅导师的个人因素对培训、咨询、指导等服务效果的影响,能够提高服务效果的稳定性和有效性。
优选的,所述交互信息采集子系统1包括数据采集单元11、数据处理单元12和数据传输单元13;所述数据采集单元11用于通过由各传感器构建的传感器节点相互协作进行交互信息的采集,并输出各传感器节点采集的交互信息;所述数据处理单元12用于对各传感器节点采集的交互信息进行预处理,以获得有效的交互信息;所述数据传输单元13用于采用预先设定的数据传输机制进行交互信息的传输。
优选的,所述数据采集单元11包括传感器定位子单元和数据修正子单元;所述传感器定位子单元用于进行传感器节点定位,所述进行传感器节点定位具体包括:
(1)将少部分传感器节点部署在已知的位置坐标上,作为信标节点,根据信标节点位置建立满足家居环境的局部坐标系;
(2)假设未知节点的坐标为(x,y),能够与其进行通信的信标节点坐标分别为(x1,y1),(x2,y2),…,(xn,yn),未知节点位于各信标节点为圆心,通信半径为半径的圆的相交区域,取该区域任一点作为未知节点坐标预选点,未知节点坐标预选点到信标节点的差分函数为:
式中,ri为未知节点坐标预选点到(xi,yi)距离,i=1,2,…,n,利用最大似然估计法求取该式的最小值,即为未知节点坐标位置;
所述数据修正子单元用于对传感器在非标准环境下的监测数据进行修正,修正因子σ为:
式中,T0为传感器使用的标准温度,T为传感器使用时的环境温度。
本优选实施例实现了传感器定位和数据的准确测量。
优选的,所述数据处理单元12包括数据过滤模块和数据补全模块,所述数据过滤模块用于通过智能网关过滤错误的交互信息,所述数据补全模块用于填补丢失的交互信息;
所述通过智能网关过滤错误的交互信息,包括:
(1)去除没有落入传感器读数的有效范围内的交互信息;
(2)对剩余的交互信息进行过滤处理,具体为:
1)假设所有传感器的传感频率一致且滑动窗口大小为A,利用Jaccard相似度函数计算出两个传感器SI、SJ读数行为的相似度Sim(xI(t),xJ(t)),其中xI(t)表示传感器SI在时间t时的传感读数,xJ(t)表示传感器SJ在时间t时的传感读数;
2)定义传感器SI、SJ的最初临时相似度为:
K+1时刻的临时相似度为:
式中,xI(A+t)表示传感器SI最初的读数行为,μ为设定的可调节的变量,μ的取值范围为[-1,1];
3)设共有M个传感器,来自传感器SI的一个事件查询q,在过去被传感器频繁查询的数据比那些很少被传感器SI读取的数据与传感器SI更具有相关性,计算传感器SI的排序等级值QL(q,SI),计算公式为:
式中,n(q,SI)为在过去传感器SI针对查询q对一些主题的事件查询数目,N(q,SI)表示传感器SI针对查询q的事件查询总数,B为平滑因子;
4)采用投票法判断传感器SI的当前读数是否为错误读数,设定判断函数为:
式中,net(I)表示传感器SI的邻居传感器集合,VDecisionj(I)表示邻居传感器SJ对传感器SI作出投票决定,投票决定有两类,一类是积极的,另一类为消极的,投票决定为积极时,VDecisionj(I)=1,投票决定为消极时,VDecisionj(1)=0;PI>0时,表示传感器SI的当前读数为正常读数,PI<0时,表示传感器SI的当前读数为错误读数。
所述填补丢失的交互信息,包括:
(1)采用K-means聚类方法进行交互信息的聚类处理;
(2)对同一类中的缺失值进行却是数据的填充。
本优选实施例过滤错误的交互信息时,考虑了传感器与邻居节点以及环境之间的关联性,通过排序算法为每个传感器分配一个适当的权重来反映传感器的重要性,进而对传感器采集到的数据进行取舍来过滤采集过程中的错误数据和环境引起的不正常数据,提高了过滤的精度;采用先聚类后填补缺失值的方式填补丢失的交互信息,可以较好的考虑数据的局部特性,提高数据填补的精度。
在一个实施例中,所述预先设定的数据传输机制包括:
(1)簇内成员在各自分配的时间段内将采集到的数据以单跳的方式传输到所属簇的簇头节点Ci,簇头节点Ci对收集到的交互信息进行整合处理;
(2)簇头节点Ci根据下式选择其他簇头节点,以确定其路由候选簇头节点集合CN:
式中,diB表示簇头节点Ci到基站的距离,djB表示簇头节点Cj到基站的距离,dij表示簇头节点Ci到簇头节点Cj的距离,NSi表示簇头节点Ci的剩余能量级别,NSj表示簇头节点Cj的剩余能量级别;
(3)若路由候选簇头节点集合CN为空,则簇头节点Ci直接将交互信息发送给基站,并跳转至(6);
(4)若路由候选簇头节点集合中只存在一个比簇头节点Ci距离基站更近或者剩余能量级别更高的其他簇头节点Cj,则选择簇头节点Cj作为下一跳路由节点,并将交互信息转发给簇头节点Cj,使簇头节点Cj成为新的簇头节点Ci,并跳转回(2);
(5)若路由候选簇头节点集合中存在多个比簇头节点Ci距离基站更近或者剩余能量级别更高的其他簇头节点Cj,则选择使得转发交互信息通信开销最小的簇头节点Cj作为下一跳路由节点,并将交互信息转发给簇头节点Cj,使簇头节点Cj成为新的簇头节点Ci,并跳转回(2);
(6)基站接收簇头节点Ci发送的交互信息。
本优选实施例采用预先设定的数据传输机制进行交互信息的传输,使簇头节点的剩余能量分布更加均衡,有效解决了距离基站较近或者距离基站较远的节点能量过早消耗完的问题,从而延长了整个数据传输网络的生命周期。
在另一个实施例中,所述预先设定的数据传输机制包括:
针对不同传输数据大小和传输距离采用不同的传输方式,定义传输函数Tr:
式中,S为传输数据大小,S0为数据传输大小分界值,S0=1MB,D为传输距离,D0为传输距离远近分界值,D0=10m;
若D<D0,则采用蓝牙进行数据通信,
若D≥D0且S≤S0,则采用zigbee网络进行数据通信,
若D≥D0且S>S0,则采用WIFI进行通信。
本优选实施例在实现了对交互信息低能耗、高速率的通信。
最后应当说明的是,以上实施例仅用以说明本发明的技术方案,而非对本发明保护范围的限制,尽管参照较佳实施例对本发明作了详细地说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的实质和范围。

Claims (3)

1.多媒体交互系统,其特征是,包括存储子系统、多媒体播放子系统、交互信息采集子系统、信息处理子系统;所述存储子系统用于存储与用户交互所需的交互脚本,所述交互脚本包括已预订播放方式和播放条件的多媒体数据;所述交互信息采集子系统,用于采集并输出用户的交互信息,所述交互信息包括用户的状态信息和用户所处环境的环境信息;所述信息处理子系统与所述存储子系统、所述多媒体播放子系统和所述交互信息采集子系统分别连接,用于根据所述交互信息调取所述交互脚本中的多媒体数据,并将所调取的多媒体数据输出至所述多媒体播放子系统。
2.根据权利要求1所述的多媒体交互系统,其特征是,所述状态信息包括用户的姿态信息、语音信息、生理信息。
3.根据权利要求2所述的多媒体交互系统,其特征是,所述多媒体播放子系统包括音频播放设备、视频播放设备。
CN201610886223.1A 2016-10-10 2016-10-10 多媒体交互系统 Pending CN106453051A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610886223.1A CN106453051A (zh) 2016-10-10 2016-10-10 多媒体交互系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610886223.1A CN106453051A (zh) 2016-10-10 2016-10-10 多媒体交互系统

Publications (1)

Publication Number Publication Date
CN106453051A true CN106453051A (zh) 2017-02-22

Family

ID=58174963

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610886223.1A Pending CN106453051A (zh) 2016-10-10 2016-10-10 多媒体交互系统

Country Status (1)

Country Link
CN (1) CN106453051A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108683628A (zh) * 2018-03-29 2018-10-19 北京数立通科技有限责任公司 一种基于三网融合的家庭智能多媒体交互设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101149950A (zh) * 2007-11-15 2008-03-26 北京中星微电子有限公司 实现分类播放的媒体播放器及分类播放方法
US20090088877A1 (en) * 2005-04-25 2009-04-02 Sony Corporation Musical Content Reproducing Device and Musical Content Reproducing Method
CN104298722A (zh) * 2014-09-24 2015-01-21 张鸿勋 多媒体交互系统及其方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090088877A1 (en) * 2005-04-25 2009-04-02 Sony Corporation Musical Content Reproducing Device and Musical Content Reproducing Method
CN101149950A (zh) * 2007-11-15 2008-03-26 北京中星微电子有限公司 实现分类播放的媒体播放器及分类播放方法
CN104298722A (zh) * 2014-09-24 2015-01-21 张鸿勋 多媒体交互系统及其方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
YUAN XU: "Event Query Filtering Algorithm in Wireless Sensor Networks Based on Correlation Ranking", 《JOURNAL OF INFORMATION & COMPUTATIONAL SCIENCE》 *
YUAN XU: "Residual Energy Level based Clustering Routing Protocol for Wireless Sensor Networks", 《PROCEEDINGS IN THE 7TH INTERNATIONAL SOCIETYFOR OPTICS AND PHOTONICS》 *
原旭: "一种基于Hadoop的改进减法聚类算法", 《微电子学与计算机》 *
杨磊: "基于ZigBee和GPRS无线远程森林防火系统研究与设计", 《中国优秀硕士学位论文全文数据库 农业科技辑》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108683628A (zh) * 2018-03-29 2018-10-19 北京数立通科技有限责任公司 一种基于三网融合的家庭智能多媒体交互设备

Similar Documents

Publication Publication Date Title
CN104123398B (zh) 一种信息推送方法及装置
CN104335564B (zh) 用于标识和分析用户的个人情景的系统和方法
CN107370983A (zh) 用于视频监控系统的行踪轨迹的获取方法和装置
CN105738932B (zh) 轨迹的生成方法和装置
CN104408043B (zh) 一种信息处理方法及服务器
CN107291888A (zh) 基于机器学习统计模型的入住酒店附近生活推荐系统方法
CN102610130A (zh) 一种高效的学习系统
CN107122959A (zh) 一种事务管理方法、计算机设备及存储介质
CN106875005A (zh) 自适应阈值神经元信息处理方法和系统
CN106297252A (zh) 一种工业园区大气污染监测系统
CN109461134A (zh) 一种输电线路无人机巡检方法、装置、终端及存储介质
CN106453050A (zh) 基于社交应用的信息处理方法、系统以及相关设备
CN107102833A (zh) 线路信息互动方法及电子设备
CN204990414U (zh) 基于物联网的教学系统
CN106650213A (zh) 一种远程医疗系统
CN106290772A (zh) 一种污水监测系统
CN107172198A (zh) 一种信息处理方法、装置及系统
CN104157168A (zh) 一种应用于人工智能机器人的智能数据库应用系统及交互方法
DE102006015016B3 (de) Verteilte Organisation von Sensornetzwerken
CN204733177U (zh) 一种用于防止用户沉迷网络的网络监控系统
CN106953906A (zh) 一种部署服务器的系统和方法
CN106292611A (zh) 一种基于云计算的智慧农业控制系统
CN106453051A (zh) 多媒体交互系统
CN105844168A (zh) 用于群智感知的隐私保护方法及装置
CN109900865A (zh) 一种基于神经网络的空气污染检测系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170222

RJ01 Rejection of invention patent application after publication