CN101887489A - 一种使现实和虚拟世界中人物交互影响的方法 - Google Patents
一种使现实和虚拟世界中人物交互影响的方法 Download PDFInfo
- Publication number
- CN101887489A CN101887489A CN2010101807096A CN201010180709A CN101887489A CN 101887489 A CN101887489 A CN 101887489A CN 2010101807096 A CN2010101807096 A CN 2010101807096A CN 201010180709 A CN201010180709 A CN 201010180709A CN 101887489 A CN101887489 A CN 101887489A
- Authority
- CN
- China
- Prior art keywords
- state
- user
- parameter
- personage
- virtual world
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
一种使现实和虚拟世界中人物交互影响的方法,包括如下步骤:(1)利用传感器收集现实生活中用户的各种信息;(2)接着根据收集到的各种传感器数据,利用机器学习方法推断用户行为状态;(3)利用用户行为状态与事先建立的用户行为状态学习库进行比较得到用户的人物状态参数;(4)根据统计结果设定在现实世界与虚拟世界中用户的同一状态各自对应着的参数来建立两者之间的函数关系;(5)通过该函数关系并依据步骤3中得到的人物状态参数得出虚拟世界的人物状态参数;(6)根据虚拟世界的人物状态参数,调整该人物在虚拟游戏中的状态。
Description
技术领域
本发明涉及利用传感器监测现实生活中用户的运动行为,以及将现实世界中用户行为和虚拟世界中虚拟角色状态以及相关属性相互结合并交互式影响的方法。
背景技术
根据出版总署09年1月初公布的数据,08年我国网络游戏出版产业实际销售收入达183.8亿元,比2007年增长76.6%。网络游戏产业收入规模已经远远超过传统的三大娱乐产业--电影、电视和音乐,成为中国娱乐业与互联网行业发展的排头兵。
在网络游戏蓬勃发展的同时,也受到了众多质疑和打击。有人认为网络游戏让人(尤其是青少年)沉迷,导致精神沉沦,而且由于长时间坐着不动,运动机会减少,导致各种疾病发生。
其实网络游戏本身就没有错,适当时间玩乐可以让人放松,所以如何引导人们在网络游戏上合理花销时间是现在新型游戏的当务之急。
随着电子与通信技术的发展,传感器开始覆盖人类生活的各个方面,例如无线接入点、射频发生器、加速度计等,这些传感器能够在无形中记录人们的行为,从而推断出人们所处的状态。基于传感器的行为识别已成为目前研究的热点,它们多采用传感器技术和数据挖掘/机器学习算法相结合的方法,从底层的传感器信息推断高层的用户行为状态。
若将现实中推断出来的用户行为状态影响虚拟游戏中的虚拟角色,包括虚拟角色的行为和情绪等状态以及能力、经验值或虚拟货币等属性,可以让用户主动发觉自身状态,从而通过游戏正向引导用户调节现有的行为状态。另一方面,游戏中用户闯关的能力,不再是靠牺牲身体日日夜夜电脑前拼杀得到,而是靠日常生活中时刻调节到最佳的行为状态得到,这让游戏变得更加健康,更加利于生活。
发明内容
本发明的目的是解决现有的网络游戏严重影响人的日常生活以及身心健康的问题,提出了一种将行为识别技术引入到虚拟网络游戏当中,由游戏用户的行为状态影响游戏中的虚拟角色,通过虚拟角色的行为和情绪等状态以及能力、经验值或虚拟货币等属性的变化反作用于现实中的用户,将现实与虚拟相统一的方法,既能引导用户合理安排游戏时间,休闲和锻炼两不误,又能让游戏更利于健康生活。
为达到上述目的,本发明提供如下技术方案:
基于虚实结合的对称交互式行为模型方法,包括如下步骤:
步骤1:用户当前行为状态识别。利用传感器可以测量用户的加速度、速度、所处环境的信号等各种底层信息,利用机器学习方法推断出用户的行为状态。
步骤2:得到现实世界的人物状态参数。根据步骤1推断出的用户状态信息,在已有的学习库中进行匹配,找出对应的人物状态参数。其中学习库是根据经验统计得到。
步骤3:得到虚拟世界角色的状态参数以及各属性参数。我们设定在现实世界与虚拟世界中,人物的同一状态对应着相似的参数,两者存在一定关系。现实世界中人物状态参数通过非线性映射函数转换,计算出虚拟世界角色的状态参数以及属性参数。
步骤4:调整游戏中虚拟角色的行为状态以及对应属性值。根据虚拟世界角色的状态参数,调整游戏中虚拟角色的行为和情绪等状态,同时根据虚拟世界角色的属性参数,调整虚拟角色的能力、经验值或虚拟货币等属性。
以上步骤将循环进行,并非时刻需要监测用户的行为,而是通过虚拟世界人物的表现和界面设计(形象和动作等)来反馈提醒用户可通过以上自身行为对虚拟人物进行状态调整,而不是仅需要用户沉迷于游戏中或长时间通过游戏来增加自己虚拟人物各种状态(包括拥有物)。
本发明产生的有益效果是:
本发明利用广泛应用的传感器采集用户的各种行为数据,推断用户现处的身体情况等状态,并将此状态反映至游戏的虚拟角色中,包括虚拟角色的行为和情绪等状态以及能力、经验值或虚拟货币等属性等,进而使用户主动发觉自身状态的不足,从而进行状态调整,达到一个游戏正向推动用户健康生活的目的。具体来说,本发明有以下优势:
1、利用现在广泛应用的传感器,随时探测用户的行为,推测其状态,方便易行。
2、让游戏中的虚拟角色的各个属性状态变化反映自身的身体状态,用户主动式发觉以及被动式提醒,这种方式与其他方式比较,更易于接受,也更有督促力。
3、将现实世界与虚拟世界相结合,交互式影响,正向推动用户在游戏与健康之间达到平衡,从而享受积极的健康生活,该方式也是首创。
本发明产生以上3个有益效果,让用户在游戏之中也能随时感知自身的状态信息,督促自身随时进行行为状态的调节改善。本发明可用于游戏产业和健康行业的软件设计当中。
附图说明
图1是基于虚实结合的对称交互式行为模型的流程示意图;
图2是基于虚实结合的对称交互式行为模型的模块控制示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明的基于虚实结合的对称交互式行为模型进一步详细说明。应当理解,此处所描述的具体实施案例仅仅用以解释本发明,并不用于限定本发明。
如附图1所示,基于虚实结合的对称交互式行为模型的流程为:当用户处在某一状态下,传感器采集相关数据,根据这些传感器数据利用机器学习方法,如最近邻(KNN),支持向量机(SVM)或隐马模型(HMM)等,推断出用户的状态,然后将得到的状态与已统计好的学习库进行匹配,找出用户对应的状态参数,再通过非线性映射变换,找到虚拟角色对应的状态参数以及属性参数,最后通过参数化方法调整虚拟角色的行为和情绪等状态以及能力、经验值或虚拟货币等属性。以上流程可以概括为四个控制模块(见附图2),分别对应下面的4个步骤。具体如下:
步骤1:用户当前行为状态识别。此模块包含传感器数据采集以及机器学习推断用户行为状态两部分。
首先利用传感器采集用户行为状态数据,如利用加速度传感器可以收集用户的加速度信息,速度传感器可以收集用户速度信息,手机中的Wi-Fi模块可以收集用户所在地的ap信号强度。
接着根据收集到的各种传感器数据,采用机器学习方法推断用户行为状态。如根据加速度信息可以得到用户跑步或静止等运动状态,根据速度信息得到用户跑步强度信息。而通过ap信号信息可以得到用户的位置。将所有的传感器信息的综合,得到用户的最终状态。如根据ap信号信息,推断出用户在公园,加速度信息推断出用户在跑步,速度传感器信息推断出用户处于适度速度。再综合时间信息,我们可得到,该用户处于一个适度锻炼的状态。
在机器学习领域,需要先建立好用户行为状态模型,其输入是采集到的传感器数据,而输出是用户的行为状态。有很多方法可以用来建立用户行为状态模型。如可采用最近邻(KNN),支持向量机(SVM)或隐马模型(HMM)等学习方法来应用于该问题。支持向量机(SVM)是机器学习领域常用的训练方法之一,具体使用方法具有公开的工具软件和说明,可参考:http://svmlight.joachims.org/。机器学习方法包括2个过程,其一是训练,人工采集若干数据,训练后得到判断模型。其二是应用,对新采集的传感器数据判断用户的行为状态。
步骤2:得到现实世界的人物状态参数。此模块也包含两个部分,学习库的建立以及状态信息到状态参数的匹配。
首先根据实际经验统计得到所需的学习库。由于人的状态受多个因素影响,如地点,行为,时间等,我们定义一个向量涵盖各因素。我们设置各因素最高等级为5,从好到差分别对应5等级-1等级。若用户在公园正常速度跑步1小时,根据实际经验,公园环境好,地点因素等级设置为5,跑步属于锻炼,行为因素设置为5,时间1小时适度,时间等级设置为5,最终的状态参数为(5,5,5)。各因素等级高的情况下,对应于用户身体状况以及精神状况好。若用户在办公室久坐3个小时,根据实际经验,我们设置状态为(2,2,2),对应于用户处于一个疲乏状态。状态向量应尽量涵括各种因素。学习库中应尽量涵括现实生活中用户的各种状态。
学习库建立之后,就可以应用于模型中。将步骤1推断出的用户状态信息,在学习库中进行匹配,找出对应的人物状态参数向量。同时在以后的应用过程中,继续对学习库进行修改补充。
步骤3:得到虚拟世界角色的状态参数以及属性参数。该模块也包含两个部分,映射函数的建立以及应用。
我们设定在现实世界与虚拟世界中,人物的同一状态对应着相似的参数,两者存在一定关系。
生成虚拟人目前主要的一种技术,是通过计算机图形技术合成三维动画人物,用动画参数驱动人脸的口型动作和面部、头部等表情动作,其特点在于实时性好。
MPEG4视频编码标准中的人脸动画参数框架主要定义了两套参数,一是人脸结构定义参数FDP(Faicial Definition Parameter),另一个是人脸动画参数FAP(Facial Animation Parameter)。FDP参数根据人脸的特征结构,选取了84个人脸关键特征点作为人脸的结构定义,比如鼻尖、嘴角、眉梢等等。FAP参数基于人脸的肌肉动作,定义了64种人脸特征点的基本动作,比如嘴角上翘、眉心上扬、下巴张开等等。FDP参数基本覆盖了人脸动作的关键特征点,而FAP参数则与FDP参数相对应,描述了人脸基本结构的各种动作类型。FAP的参数范围设定在0到1024之间,对应了人脸的动作从中性状态到可能的最大幅度的动作。
因此,统计人物同一状态下的现实世界中的参数(步骤2中的状态等级参数)和该状态下虚拟角色对应状态参数(如FAP参数),最终得到一个非线性的映射函数F。该非线性映射函数也可以通过机器学习的方法获得,如支持向量机SVM或神经网络。更深一步,不仅虚拟人脸部参数可以映射得到,同时也可以映射得到虚拟人动作参数。
对于虚拟人能力、经验值或虚拟货币等属性参数,可以通过简单的非线性映射函数F(x)=g(a)*x+b其中x为原属性值,b为游戏自设置的某一常数,a为现实世界中人物状态参数各维数的变化量的平均值,参数ai对应于现实世界中人物状态参数各维数的变化量,参数i对应于现实世界中人物状态参数中向量维数,如对应步骤2例子中的地点,行为,时间三因素,i=1,2,3,函数g为分段函数,例如,设置参数b=0,原属性虚拟货币个数为30,原现实世界中用户的状态参数为(5,5,5),用户玩3小时游戏后,当前状态参数变为(3,3,3),状态参数各维下降了2等级,则设参数ai=1/2,i=1,2,3,对应于当前虚拟人虚拟货币属性值为其余属性值可进行相似调节。
得到映射函数后,将现实世界中人物状态参数通过相应的映射函数转换,计算出虚拟世界的人物状态参数以及属性参数。
步骤4:调整虚拟游戏中虚拟人的状态以及对应的属性值。根据虚拟世界的人物状态参数,如脸部FAP参数或动作参数,调整游戏虚拟人的状态。具体参照基于MPEG4视频编码标准的三维人脸动画方法。而属性值的改变只需将步骤3得到的属性参数在游戏界面中实时刷新即可。
若用户状态好,则虚拟人状态好,相应游戏中所需的属性值高,在游戏中表现好,反之,则表现差,甚至无法正常完成游戏环节。
由于游戏中虚拟人反映了用户当前的状态,则用户可自主发觉自身的状态,如果状态不好,可导致虚拟人在游戏环节中受阻,就可督促用户及时调整自身状态,如加强锻炼等。以上四个步骤循环进行,让用户在享受游戏的过程中也能照顾好自己的现实生活。
以上所述内容,仅为本发明具体的实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围内。
Claims (2)
1.一种使现实和虚拟世界中人物交互影响的方法,其特征在于包括如下步骤:(1)利用传感器收集现实生活中用户的各种信息;(2)接着根据收集到的各种传感器数据,利用机器学习方法推断用户行为状态;(3)利用用户行为状态与事先建立的用户行为状态学习库进行比较得到用户的人物状态参数;(4)根据统计结果设定在现实世界与虚拟世界中用户的同一状态各自对应着的参数来建立两者之间的函数关系;(5)通过该函数关系并依据步骤3中得到的人物状态参数得出虚拟世界的人物状态参数;(6)根据虚拟世界的人物状态参数,调整该人物在虚拟游戏中的状态。
2.如权利要求1所述的一种使现实和虚拟世界中人物交互影响的方法,其特征在于,用户的各种信息包括速度、加速度、所处位置参数。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2010101807096A CN101887489A (zh) | 2010-05-24 | 2010-05-24 | 一种使现实和虚拟世界中人物交互影响的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2010101807096A CN101887489A (zh) | 2010-05-24 | 2010-05-24 | 一种使现实和虚拟世界中人物交互影响的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101887489A true CN101887489A (zh) | 2010-11-17 |
Family
ID=43073406
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010101807096A Pending CN101887489A (zh) | 2010-05-24 | 2010-05-24 | 一种使现实和虚拟世界中人物交互影响的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101887489A (zh) |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102722312A (zh) * | 2011-12-16 | 2012-10-10 | 江南大学 | 一种基于压力传感器的动作趋势预测交互体验方法及系统 |
CN104219369A (zh) * | 2013-05-29 | 2014-12-17 | 汤洋 | 利用手机传感器、传感器装置及将上述传感器应用于游戏的方法 |
CN104244059A (zh) * | 2014-09-25 | 2014-12-24 | 苏州乐聚一堂电子科技有限公司 | 活动感应远程音视频互动系统 |
CN104461016A (zh) * | 2014-12-23 | 2015-03-25 | 杭州云造科技有限公司 | 产品的机器性格表现方法及装置 |
CN104657828A (zh) * | 2015-02-17 | 2015-05-27 | 华为技术有限公司 | 数据化和数据匹配方法和代码推荐方法及相关装置 |
CN104866696A (zh) * | 2014-02-20 | 2015-08-26 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
CN106730813A (zh) * | 2016-11-30 | 2017-05-31 | 宇龙计算机通信科技(深圳)有限公司 | 虚拟人物指标设定方法、装置、处理器及游戏设备 |
CN107194515A (zh) * | 2017-05-27 | 2017-09-22 | 冯小平 | 确定用户当前行为以及预测用户意图的方法和装置 |
CN108021794A (zh) * | 2017-11-29 | 2018-05-11 | 佛山市因诺威特科技有限公司 | 一种游戏防沉迷控制方法、终端装置和可读存储介质 |
CN108057246A (zh) * | 2017-11-08 | 2018-05-22 | 江苏名通信息科技有限公司 | 基于深度神经网络学习的手游增强现实方法 |
CN108886532A (zh) * | 2016-01-14 | 2018-11-23 | 三星电子株式会社 | 用于操作个人代理的装置和方法 |
CN109840019A (zh) * | 2019-02-22 | 2019-06-04 | 网易(杭州)网络有限公司 | 虚拟人物的控制方法、装置及存储介质 |
CN110302540A (zh) * | 2018-08-29 | 2019-10-08 | 上海交通大学 | 基于ga-svm的游戏防沉迷判定系统及方法 |
WO2020151273A1 (zh) * | 2019-01-22 | 2020-07-30 | 华南理工大学 | 一种情绪刺激虚拟现实场景自动生成系统及方法 |
US11797889B1 (en) * | 2021-01-21 | 2023-10-24 | Apple Inc. | Method and device for modeling a behavior with synthetic training data |
-
2010
- 2010-05-24 CN CN2010101807096A patent/CN101887489A/zh active Pending
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102722312A (zh) * | 2011-12-16 | 2012-10-10 | 江南大学 | 一种基于压力传感器的动作趋势预测交互体验方法及系统 |
CN102722312B (zh) * | 2011-12-16 | 2015-12-16 | 江南大学 | 一种基于压力传感器的动作趋势预测交互体验方法及系统 |
CN104219369A (zh) * | 2013-05-29 | 2014-12-17 | 汤洋 | 利用手机传感器、传感器装置及将上述传感器应用于游戏的方法 |
CN104866696A (zh) * | 2014-02-20 | 2015-08-26 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
CN104244059A (zh) * | 2014-09-25 | 2014-12-24 | 苏州乐聚一堂电子科技有限公司 | 活动感应远程音视频互动系统 |
CN104461016A (zh) * | 2014-12-23 | 2015-03-25 | 杭州云造科技有限公司 | 产品的机器性格表现方法及装置 |
CN104461016B (zh) * | 2014-12-23 | 2018-02-13 | 杭州云造科技有限公司 | 产品的机器性格表现方法及装置 |
CN104657828A (zh) * | 2015-02-17 | 2015-05-27 | 华为技术有限公司 | 数据化和数据匹配方法和代码推荐方法及相关装置 |
CN104657828B (zh) * | 2015-02-17 | 2019-05-24 | 华为技术有限公司 | 数据化和数据匹配方法和代码推荐方法及相关装置 |
CN108886532B (zh) * | 2016-01-14 | 2021-12-17 | 三星电子株式会社 | 用于操作个人代理的装置和方法 |
CN108886532A (zh) * | 2016-01-14 | 2018-11-23 | 三星电子株式会社 | 用于操作个人代理的装置和方法 |
CN106730813A (zh) * | 2016-11-30 | 2017-05-31 | 宇龙计算机通信科技(深圳)有限公司 | 虚拟人物指标设定方法、装置、处理器及游戏设备 |
CN107194515A (zh) * | 2017-05-27 | 2017-09-22 | 冯小平 | 确定用户当前行为以及预测用户意图的方法和装置 |
CN108057246A (zh) * | 2017-11-08 | 2018-05-22 | 江苏名通信息科技有限公司 | 基于深度神经网络学习的手游增强现实方法 |
CN108021794A (zh) * | 2017-11-29 | 2018-05-11 | 佛山市因诺威特科技有限公司 | 一种游戏防沉迷控制方法、终端装置和可读存储介质 |
CN110302540A (zh) * | 2018-08-29 | 2019-10-08 | 上海交通大学 | 基于ga-svm的游戏防沉迷判定系统及方法 |
CN110302540B (zh) * | 2018-08-29 | 2022-05-03 | 上海交通大学 | 基于ga-svm的游戏防沉迷判定系统及方法 |
WO2020151273A1 (zh) * | 2019-01-22 | 2020-07-30 | 华南理工大学 | 一种情绪刺激虚拟现实场景自动生成系统及方法 |
CN109840019A (zh) * | 2019-02-22 | 2019-06-04 | 网易(杭州)网络有限公司 | 虚拟人物的控制方法、装置及存储介质 |
US11797889B1 (en) * | 2021-01-21 | 2023-10-24 | Apple Inc. | Method and device for modeling a behavior with synthetic training data |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101887489A (zh) | 一种使现实和虚拟世界中人物交互影响的方法 | |
CN102354349B (zh) | 提高孤独症儿童社会互动能力的人机互动多模态早期干预系统 | |
KR102328959B1 (ko) | 로봇, 서버 및 인간-기계 상호 작용 방법 | |
CN110070944A (zh) | 基于虚拟环境和虚拟角色的社会功能评估训练系统 | |
CN109526208A (zh) | 活动量受控制的行为自主型机器人 | |
CN108463271A (zh) | 用于运动技能分析以及技能增强和提示的系统和方法 | |
WO2021004510A1 (zh) | 基于传感器的分离式部署的人体行为识别健康管理系统 | |
CN109799903A (zh) | 基于虚拟现实的打击乐方法、终端设备及系统 | |
CN110024000A (zh) | 使瞳部变化的行为自主型机器人 | |
US10661148B2 (en) | Dual motion sensor bands for real time gesture tracking and interactive gaming | |
CN104011788A (zh) | 用于增强和虚拟现实的系统和方法 | |
CN102473320A (zh) | 通过学习到的来自用户的输入使视觉表示生动化 | |
CN102918518A (zh) | 基于云的个人特征简档数据 | |
CN103280126A (zh) | 一种智能互动早教系统 | |
CN205569617U (zh) | 一种动感健身车 | |
CN107008000A (zh) | 一种健身娱乐装置和方法 | |
CN108074633A (zh) | 一种基于日常活动的运动协调性监测方法及可穿戴设备 | |
KR20140015679A (ko) | 감성복합센서를 이용한 3d 헬스 아바타 서비스 시스템 | |
CN106880945A (zh) | 基于虚拟现实眼镜的室内骑行健身系统 | |
CN111882947A (zh) | 一种基于虚拟现实划船运动的戒毒康复训练系统 | |
CN111694426A (zh) | Vr虚拟采摘互动体验系统、方法、电子设备及存储介质 | |
CN205353941U (zh) | 一种儿童行为及运动轨迹监测系统 | |
CN107291248A (zh) | 一种基于虚拟现实的压力评测减压的系统及方法 | |
CN110838357A (zh) | 基于人脸识别及动捕的注意力全息智能训练系统 | |
CN109744999A (zh) | 穿戴式系统、穿戴式装置及其云端伺服器与操作方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20101117 |