CN103369303B - 动作行为分析记录及重现的系统及方法 - Google Patents
动作行为分析记录及重现的系统及方法 Download PDFInfo
- Publication number
- CN103369303B CN103369303B CN201310254297.XA CN201310254297A CN103369303B CN 103369303 B CN103369303 B CN 103369303B CN 201310254297 A CN201310254297 A CN 201310254297A CN 103369303 B CN103369303 B CN 103369303B
- Authority
- CN
- China
- Prior art keywords
- action
- information
- data
- behavior
- characteristic data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000009471 action Effects 0.000 title claims abstract description 307
- 238000004458 analytical method Methods 0.000 title claims abstract description 49
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000004891 communication Methods 0.000 claims abstract description 65
- 238000012545 processing Methods 0.000 claims abstract description 49
- 230000001747 exhibiting effect Effects 0.000 claims abstract description 10
- 230000006399 behavior Effects 0.000 claims description 252
- 230000033001 locomotion Effects 0.000 claims description 140
- 230000008451 emotion Effects 0.000 claims description 72
- 230000000875 corresponding effect Effects 0.000 claims description 43
- 238000004088 simulation Methods 0.000 claims description 21
- 230000001133 acceleration Effects 0.000 claims description 7
- 238000010438 heat treatment Methods 0.000 claims description 6
- 230000033764 rhythmic process Effects 0.000 claims description 5
- 230000036760 body temperature Effects 0.000 claims description 4
- 238000012795 verification Methods 0.000 claims description 3
- 238000004020 luminiscence type Methods 0.000 claims description 2
- 238000012544 monitoring process Methods 0.000 description 18
- 230000036651 mood Effects 0.000 description 10
- 230000003993 interaction Effects 0.000 description 9
- 241001465754 Metazoa Species 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 7
- 230000002996 emotional effect Effects 0.000 description 7
- 230000014509 gene expression Effects 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 238000003066 decision tree Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000004927 fusion Effects 0.000 description 3
- 230000009191 jumping Effects 0.000 description 3
- 238000005096 rolling process Methods 0.000 description 3
- 230000003997 social interaction Effects 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 2
- 241001025261 Neoraja caerulea Species 0.000 description 2
- 238000013475 authorization Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000009194 climbing Effects 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000005389 magnetism Effects 0.000 description 2
- 239000002245 particle Substances 0.000 description 2
- 208000035473 Communicable disease Diseases 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000029087 digestion Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 229910052742 iron Inorganic materials 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 210000003141 lower extremity Anatomy 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 238000005086 pumping Methods 0.000 description 1
- 238000004080 punching Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 210000001364 upper extremity Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Landscapes
- Toys (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明涉及动作行为分析记录及重现的系统及方法。该系统包括:动作行为信息采集记录装置以及动作行为展示装置。动作行为信息采集记录装置包括:采集单元,用于采集目标对象的状态信息;第一处理单元,用于分析状态信息,并根据状态信息生成相应的特征数据;及第一通信单元,用于向动作行为展示装置发送特征数据。动作行为展示装置包括:第二通信单元,用于接收动作行为信息采集记录装置发送的特征数据;第二处理单元,其对特征数据进行处理,并根据处理结果发出展示控制信号;展示单元,其根据展示控制信号重现目标对象的状态。本发明的技术方案对通信信道的带宽需求小、发送的数据流量少,并且对处理单元的处理能力要求低,具有成本低的优势。
Description
技术领域
本发明涉及传感技术及应用,更具体地说,涉及一种动作行为分析记录及重现的系统及方法。
背景技术
视频监控系统,包括前端摄像机、传输线缆、视频监控平台。摄像机可分为网络数字摄像机和模拟摄像机,可作为前端视频图像信号的采集。摄像机通过网络线缆或同轴视频电缆将视频图像传输到控制主机,控制主机再将视频信号分配到各监视器及录像设备,同时可将需要传输的语音信号同步录入到录像机内。通过控制主机,操作人员可发出指令,对云台的上、下、左、右的动作进行控制及对镜头进行调焦变倍的操作,并可通过视频矩阵实现在多路摄像机的切换。利用特殊的录像处理模式,可对图像进行录入、回放、调出及储存等操作,并可将图像上传至视频服务器,例如云端服务器。
随着通信技术及互联网的不断发展,现有的视频监控系统中,用户可以通过个人终端(例如智能手机、平板电脑、PC机等)登录视频服务器,以获取监控对象的实时或历史视频信息。
但是,视频监控系统只能采集视频和/或音频信息,并且在个人终端处展示的也是视频和/或音频信息。视频图像的传输需要占用信道带宽及流量,视频图像的处理也需要个人终端中的处理器具有强大的处理能力,这对于使用手机类个人终端设备的用户,将带来很大的使用成本。
另外,现有的视频监控系统中,监控方可以查看被监控方的行为动作,而监控方的行为动作被监控方是无法看到或知晓的,即监控方与被监控方是单向监控,无法相互监控。
发明内容
本发明要解决的技术问题在于,针对现有的视频监控系统需要通过查看视频信息来了解被监控方的行为动作,需要占用大量的传输信道带宽及流量,且监控端设备需具备强大的数据处理能力的缺陷,提供一种动作行为分析记录及重现的系统及方法,其在监控过程中,无需对视频信息进行处理。
本发明要解决的技术问题在于,针对现有的视频监控系统只能单向监控的缺陷,提供一种动作行为分析记录及重现的系统,其在监控过程中,监控方和被监控方可以双向监控。
本发明解决其技术问题所采用的技术方案是:构造一种动作行为分析记录及重现的系统,包括:
至少一个动作行为信息采集记录装置,以及通过通信网络与所述至少一个动作行为信息采集记录装置通信连接的至少一个动作行为展示装置;其中,
所述动作行为信息采集记录装置包括:
采集单元,用于采集目标对象的状态信息;
第一处理单元,用于分析所述状态信息,并根据所述状态信息生成相应的特征数据;
第一存储单元,用于存储所述特征数据;及
第一通信单元,用于向所述至少一个动作行为展示装置发送所述特征数据;
所述动作行为展示装置包括:
第二通信单元,用于接收所述至少一个动作行为信息采集记录装置发送的特征数据;
第二处理单元,用于对所述特征数据进行处理,并根据处理结果发出展示控制信号;及
展示单元,用于根据所述展示控制信号,重现目标对象的状态。
在本发明所述的动作行为分析记录及重现的系统中,
所述状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息;
所述特征数据包括与所述状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据;
所述动作特征数据包括动作特征代码和/或三维空间坐标数据及姿态角数据,所述情绪特征数据包括情绪特征代码。
在本发明所述的动作行为分析记录及重现的系统中,
所述动作行为信息采集记录装置中的第一处理单元包括:
根据情绪信息生成情绪特征代码的模块;
根据动作信息生成动作特征代码的模块;和/或
根据动作信息生成三维空间坐标数据及姿态角数据的模块;
所述动作行为展示装置包括:
第二存储器,用于存储数据库,所述数据库中包含所述动作特征代码与动作展示数据的动作对照表,和/或所述情绪特征代码与情绪展示数据的情绪对照表;
其中,第二处理单元对所述特征数据进行处理包括:根据所述动作特征代码和/或情绪特征代码从数据库中查找相应的动作展示数据和/或情绪展示数据,以生成所述展示控制信号。
在本发明所述的动作行为分析记录及重现的系统中,
所述动作行为信息采集记录装置中的所述采集单元包括用于感测所述目标对象的动作、情绪、生命体征、形状和/或尺寸信息并产生相应的感测数据的传感器和/或度量器;其中,所述传感器包括加速度传感器、陀螺仪、地磁传感器中的一种或多种。
在本发明所述的动作行为分析记录及重现的系统中,所述动作行为信息采集记录装置包括防水及避震外壳,所述采集单元、第一处理单元、第一通信单元,以及用于为所述动作行为信息采集记录装置供电的纽扣电池均安置在所述外壳内。
在本发明所述的动作行为分析记录及重现的系统中,
所述动作行为展示装置为计算机、智能电视或移动终端设备,其以图形和/或动画形式重现所述目标对象的动作、情绪、形状和/或尺寸,且所述动作行为信息采集记录装置与所述计算机、智能电视或移动终端设备通过所述通信网络采用社交软件通信;或者
所述动作行为展示装置为机器人、机器装置和/或智能玩偶,其以动作模拟、发光、振动、制热和/或制湿形式重现所述目标对象的状态,所述状态包括动作、心跳节奏、体温和/或湿度;或者
所述动作行为展示装置为内附充气泵及放射状活动支架结构的气球,其以缩放及变形方式重现所述目标对象的形状和/或尺寸。
在本发明所述的动作行为分析记录及重现的系统中,所述动作行为展示装置中的展示单元包括独立的动作模拟装置,其通过有线或无线短距离通信方式接收所述第二处理单元发出的展示控制信号;其中,所述独立的动作模拟装置包括机器人、机器装置和/或智能玩偶。
在本发明所述的动作行为分析记录及重现的系统中,所述特征数据还包含采集发送状态信息的动作行为信息采集记录装置的ID码和/或与所述状态信息相关联的时间戳,所述动作行为展示装置根据接收到的所述至少一个动作行为信息采集记录装置发送的特征数据中所包含的状态信息、所述ID码和/或所述时间戳同时或顺序重现目标对象的状态。
本发明解决其技术问题所采用的技术方案是:构造一种动作行为分析记录及重现的系统,包括:
至少两个动作行为信息采集及展示装置,其中,
所述动作行为信息采集及展示装置包括:
采集单元,用于采集目标对象的状态信息;
处理单元,用于分析所采集的状态信息,并根据所采集的状态信息生成相应的特征数据;以及根据接收到的特征数据产生展示数据;
通信单元,用于发送和接收特征数据;
展示单元,用于根据所述展示数据重现目标对象的动作、形状和/或尺寸。
在本发明所述的动作行为分析记录及重现的系统中,
所述至少两个动作行为信息采集及展示装置之间无线短距离通信连接和/或通过通信网络远程通信连接,或者,
所述至少两个动作行为信息采集及展示装置均连接于带数据及控制通道的媒体播放器,以同时在所述媒体播放器和所述动作行为信息采集及展示装置上重现所述目标对象的动作、形状和/或尺寸。
在本发明所述的动作行为分析记录及重现的系统中,所述至少两个动作行为信息采集及展示装置之间通过通信网络采用社交软件通信。
本发明解决其技术问题所采用的技术方案是:提供一种动作行为分析记录及重现的方法,包括如下步骤:
A:采集目标对象的状态信息;
B:分析所述状态信息,并根据所述状态信息生成相应的特征数据;
C:向至少一个动作行为展示装置发送所述特征数据;
D:所述至少一个动作行为展示装置接收至少一个动作行为信息采集记录装置发送的特征数据并根据所述特征数据产生展示控制信号,以重现所述目标对象的状态。
在本发明所述的动作行为分析记录及重现的方法中,
所述特征数据中包含有与所述状态信息相关联的时间戳;
所述步骤B和/或步骤D还包括:
存储所述特征数据,用以事后追踪、复制、编辑目标对象的状态。
在本发明所述的动作行为分析记录及重现的方法中,步骤C中包括同时发送采集发送所述状态信息的动作行为信息采集记录装置的ID码,
步骤D中包括对所述ID码进行验证,仅当验证通过时重现目标对象的状态。
在本发明所述的动作行为分析记录及重现的方法中,
所述步骤C中的所述发送包括无线短距离发送、通过通信网络发送、和/或通过通信网络采用社交软件发送。
在本发明所述的动作行为分析记录及重现的方法中,
所述状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息;
所述特征数据包括与所述状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据。
在本发明所述的动作行为分析记录及重现的方法中,所述动作特征数据和情绪特征数据分别包括动作特征代码和情绪特征代码;所述步骤D包括:
D2、根据所述动作特征代码和/或情绪特征代码从数据库中查找相应的动作展示数据和/或情绪展示数据,并根据所述动作展示数据和/或情绪展示数据重现目标对象的动作和/或情绪。
在本发明所述的动作行为分析记录及重现的方法中,包括步骤E,动作行为展示装置将展示控制信号发送给独立的动作模拟装置,以使所述独立的动作模拟装置重现目标对象的状态。
实施本发明,具有以下有益效果:
相对于现有视频控制系统而言,本发明的技术方案中由于传输、处理的是代表目标对象状态信息的特征数据(而非视频数据),因而对通信信道的带宽需求小、传输的数据流量少、并且对处理单元的处理能力要求低,因此,本发明的技术方案具有成本低的优势。
另外,本发明的技术方案中动作行为信息采集记录装置和动作行为展示装置之间采用社交软件交互,以图形或动画的形式重现目标对象的状态,直观、方便,有利于用户查看。
再有,本发明的技术方案中,还将展示控制信号发送给独立的动作模拟装置,可使包括机器人、机器装置和/或智能玩偶在内独立的动作模拟装置重现目标对象的状态,具有形象、生动、直观的优点。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是根据本发明一实施例、动作行为分析记录及重现的系统的结构示意图;
图2是本发明动作行为分析记录及重现的系统中动作行为信息采集记录装置的结构示意图;
图3是本发明动作行为分析记录及重现的系统中动作行为展示装置的结构示意图;
图4是根据本发明另一实施例、动作行为分析记录及重现的系统的结构示意图;
图5是本发明动作行为分析记录及重现的系统中动作行为信息采集及展示装置的结构示意图;
图6是本发明动作行为分析记录及重现的方法的流程图。
具体实施方式
参见图1至图3。如图1所示,在本发明的动作行为分析记录及重现的系统第一实施例中,动作行为分析记录及重现的系统包括多个动作行为信息采集记录装置1(分别标识为动作行为信息采集记录装置1a、1b……1n)和多个动作行为展示装置2(分别标识为动作行为展示装置2a、2b……2n),其中,动作行为信息采集记录装置1a、1b……1n通过通信网络5分别与动作行为展示装置2a、2b……2n通信连接。在实际应用中,动作行为信息采集记录装置1的数量可以是一个、二个或多个,动作行为展示装置2的数量也可以是一个、二个或多个。一方面,动作行为信息采集记录装置1可将其采集的动作行为信息发送给一个动作行为展示装置2,也可以广播的方式将其采集的动作行为信息发送至一个以上的动作行为展示装置2。另一方面,动作行为展示装置2可以接收一个动作行为信息采集记录装置1发送的信息,也可以接收一个以上的动作行为信息采集记录装置1发送的信息。
如图2所示,动作行为信息采集记录装置1包括:第一处理单元10,与第一处理单元10通信连接的第一通信单元12、采集单元13和第一存储器14,以及用于为整个动作行为信息采集记录装置1提供电源的第一供电单元15。
采集单元13用于采集目标对象的状态信息。在本发明的各个实施例中,采集单元13包括用于感测目标对象的动作、情绪、生命体征、形状和/或尺寸信息并产生相应的感测数据的传感器和/或度量器。其中,传感器包括加速度传感器、陀螺仪、地磁传感器中的一种或多种。
本发明的动作行为分析记录及重现的系统可以应用于各种场合,根据不同的应用场合,目标对象分别可以是人、动物、机器装置、机器人、玩偶等。采集单元13所采集的状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息等。
第一处理单元10用于分析上述状态信息,并根据状态信息生成相应的特征数据。在本发明的各个实施例中,特征数据包括:与状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据等。进一步地,动作特征数据包括动作特征代码和/或三维空间坐标数据及姿态角数据,情绪特征数据包括情绪特征代码。
在一实施例中,第一处理单元10包括根据情绪信息生成情绪特征代码的模块;根据动作信息生成动作特征代码的模块;和/或根据动作信息生成三维空间坐标数据及姿态角数据的模块。
第一存储单元14用于存储上述特征数据,用以事后追踪、复制、编辑目标对象的状态。
第一通信单元12用于向至少一个动作行为展示装置发送上述特征数据。第一通信单元12可以是无线通信模块,也可以是有线通信模块。对于自身移动范围较大的目标对象,优选使用无线通信模块。
如图3所示,动作行为展示装置2包括:第二处理单元20,与第二处理单元20通信连接的第二通信单元22、展示单元23、第二存储器24和数据输入/输出接口26,以及用于为整个动作行为展示装置2提供电源的第二供电单元25。
第二通信单元22用于接收动作行为信息采集记录装置1发送的特征数据。第二通信单元22可以是无线通信模块,也可以是有线通信模块。
第二处理单元20,用于对所述特征数据进行处理,并根据处理结果发出展示控制信号。在一实施例中,第二处理单元对特征数据进行处理包括:根据动作特征代码和/或情绪特征代码从数据库中查找相应的动作展示数据和/或情绪展示数据,以生成展示控制信号。在另一实施例中,第二处理单元根据生命体征特征数据、形状特征数据和/或尺寸特征数据生成展示控制信号。
展示单元23用于根据展示控制信号,重现目标对象的状态。其中,重现包括:以表情符号、图形、动画、动作模拟、发光、振动、制热、制湿、缩放和/或变形等方式中的一种或多种方式展示目标对象的状态信息。
第二存储单元24用于存储数据库,所述数据库中包含动作特征代码与动作展示数据的动作对照表,和/或情绪特征代码与情绪展示数据的情绪对照表。
第二供电单元25用于为整个动作行为展示装置2提供电源。
数据输入/输出接口26用于接收外部输入的数据及将向外部设备传送数据。
在一实施例中,动作行为展示装置2为带有显示屏的游戏机、蓝光播放器,计算机、智能电视,以及平板电脑、智能手机等移动终端设备,其以图形和/或动画形式重现目标对象的动作、情绪、形状和/或尺寸。
在另一实施例中,动作行为展示装置2为机器人、机器装置和/或智能玩偶,其以动作模拟、发光、振动、制热和/或制湿形式重现所述目标对象的状态,所述状态包括运动/运行状态(包括动作)、人或动物的心跳节奏、体温和/或湿度等。
在又一实施例中,动作行为展示装置2为内附充气泵及放射状活动支架结构的气球,其以缩放及变形方式重现所述目标对象的形状和/或尺寸。
在本发明的一些实施例中,动作行为展示装置中的展示单元23包括独立的动作模拟装置,其通过有线或无线短距离通信方式接收第二处理单元20发出的展示控制信号;其中,独立的动作模拟装置包括机器人、机器装置和/或智能玩偶。例如,在动作行为展示装置2为带有显示屏的计算机、游戏机,以及平板电脑、智能手机等移动终端设备的情况下,动作行为展示装置2除了在显示屏上以图形(例如表情符号)和/或动画形式重现目标对象的动作、状态、形状和/或尺寸之外,还可以将展示控制信号发送至独立的动作模拟装置,例如机器人、机器装置和/或智能玩偶,以使独立的动作模拟装置以动作模拟的方式重现目标对象的运动/运行状态。
在一个实施例中,动作行为信息采集记录装置包括防水及避震外壳,采集单元13、第一处理单元10、第一通信单元12、第一存储器14,以及用于为动作行为信息采集记录装置供电的纽扣电池均安置在所述外壳内。在实际应用中,动作行为信息采集记录装置可以制成纽扣型,此外还可以制成名片、卡片、贴纸等类型,以便于粘贴在各类目标对象上。
在一些实施例中,动作行为信息采集记录装置集成在机器人、机器装置和/或智能玩偶中,或者安装(贴附)在机器人、机器装置和/或智能玩偶上。在另一些实施例中,动作行为信息采集记录装置贴附在人、动物的身体上。
在本发明的一实施例中,动作行为信息采集记录装置与动作行为展示装置(例如计算机、智能电视或移动终端设备)采用社交软件通信。例如,通过基于互联网的在线社交软件(如韩国NHN麾下的Never的line,中国腾讯的微信、QQ等)以表情、心情或动作图形或动画方式重现目标对象的状态。
在一个动作行为信息采集记录装置和一个动作行为展示装置组成的动作行为分析记录及重现的系统中,该动作行为展示装置根据接收到的该动作行为信息采集记录装置发送的特征数据重现目标对象的状态。
在一个动作行为信息采集记录装置和多个动作行为展示装置组成的动作行为分析记录及重现的系统中,该多个动作行为展示装置根据接收到的该动作行为信息采集记录装置发送的特征数据重现目标对象的状态。
在多个动作行为信息采集记录装置和多个动作行为展示装置组成的动作行为分析记录及重现的系统中,动作行为信息采集记录装置发送的特征数据中除了包含状态信息,还包含采集发送状态信息的动作行为信息采集记录装置的ID码和/或与状态信息相关联的时间戳,动作行为展示装置根据接收到的多个动作行为信息采集记录装置发送的特征数据中所包含的状态信息、ID码和/或时间戳同时或顺序重现目标对象的状态。
在一个实施例中,多个动作信息采集记录装置设置在同一个目标对象上,例如当目标对象为人时,可设置在人体的不同部位,如头部、上肢、下肢和躯干等部位,以感知人体的动作。每一个动作信息采集记录装置都有一个ID码,动作行为展示装置中存储有信息对照表,表中存储有目标对象ID、安装在目标对象各个部位的动作信息采集记录装置的ID码以及部位ID的对应关系。当动作行为展示装置接收到该多个动作信息采集记录装置发送的多组特征数据后,根据ID码查询该对照表可以确认出该特征数据是代表目标对象的哪个部位的状态信息,从而向展示单元发送相应的展示控制信号,以正确地重现目标对象的状态。
在一个实施例中,多个动作信息采集记录装置分别设置在多个目标对象上,当某个动作行为展示装置接收到多个动作信息采集记录装置发送的多组特征数据后,根据其中包含的状态信息、ID码和时间戳(例如代表采集状态信息时的时间),分别重现多个目标对象的状态。例如,在计算机、智能电视或移动终端设备的显示屏上显示多个目标对象,并根据状态信息及时间戳,同时或顺序重现多个目标对象状态及状态的变化。
当然动作信息采集记录装置与动作行为展示装置还可以分组进行动作行为分析记录及重现。例如:在监狱的中控室,动作行为展示装置2a用于监视/重现动作信息采集记录装置1a和1b采集的目标对象的状态信息,动作行为展示装置2b用于监视/重现动作信息采集记录装置1c、1d采集的目标对象的状态信息,动作行为展示装置2c用来监视/重现全部动作信息采集记录装置1a,1b、1c、1d采集的目标对象的状态信息等,也就是不同的两个动作行为展示装置可以分别展示两组不同的动作信息采集记录装置,也可以由一个动作行为展示装置展示两组全部的动作信息采集记录装置采集的目标对象的状态信息。
参见图4和图5。如图4所示,在本发明的一实施例中,动作行为分析记录及重现的系统包括通过通信网络5相互通信的多个动作行为信息采集及展示装置3(分别标识为动作行为信息采集及展示装置3a、3b、3c、……3n)。在实际应用中,动作行为信息采集及展示装置3的数量可以是二个或更多个。例如,可以是二个动作行为信息采集及展示装置3进行通信,双向互动。也可以是二个以上的动作行为信息采集及展示装置3进行通信,其中,每一个动作行为信息采集及展示装置3可以向系统中的其他动作行为信息采集及展示装置3发送其所采集到的目标对象的状态信息。
如图5所示,动作行为信息采集及展示装置3包括处理单元30,与处理单元30通信连接的通信单元32、采集单元33、存储器34、数据输入/输出接口36和展示单元38,以及用于为整个动作行为信息采集及展示装置3提供电源的供电单元35。
采集单元33用于采集目标对象的状态信息。在本发明的各个实施例中,采集单元33包括用于感测目标对象的动作、情绪、生命体征、形状和/或尺寸信息并产生相应的感测数据的传感器和/或度量器。其中,传感器包括加速度传感器、陀螺仪、地磁传感器中的一种或多种。
本发明的动作行为分析记录及重现的系统可以应用于各种场合,根据不同的应用场合,目标对象分别可以是人、动物、机器装置、机器人、玩偶等。采集单元33所采集的状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息等。
处理单元30用于分析所采集的状态信息,并根据所采集的状态信息生成相应的特征数据;以及根据接收到的特征数据产生展示数据。在本发明的各个实施例中,特征数据包括:与状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据等。进一步地,动作特征数据包括动作特征代码和/或三维空间坐标数据及姿态角数据,情绪特征数据包括情绪特征代码。在一实施例中,处理单元30包括根据情绪信息生成情绪特征代码的模块;根据动作信息生成动作特征代码的模块;和/或根据动作信息生成三维空间坐标数据及姿态角数据的模块。
通信单元32用于发送和接收特征数据。例如,向外发送根据本动作行为信息采集及展示装置所采集的目标对象的状态信息分析、处理后得到的特征数据,接收其他动作行为信息采集及展示装置发送的特征数据。
存储器34用于存储特征数据,用以事后追踪、复制、编辑目标对象的状态。在一实施例中,存储器34还用于存储数据库,该数据库中包含动作特征代码与动作展示数据的动作对照表,和/或情绪特征代码与情绪展示数据的情绪对照表。
展示单元38用于根据所述展示数据重现目标对象的动作、情绪、生命体征、形状和/或尺寸。其中,重现包括:以表情符号、图形、动画、动作模拟、发光、振动、制热、制湿、缩放和/或变形等方式中的一种或多种方式展示目标对象的状态信息。
在本发明的一实施例中,动作行为信息采集及展示装置之间无线短距离通信连接和/或通过通信网络远程通信连接,或者,
动作行为信息采集及展示装置均连接于带数据及控制通道的媒体播放器,以同时在所述媒体播放器和动作行为信息采集及展示装置上重现目标对象的动作、形状和/或尺寸。
在一实施例中,动作行为信息采集及展示装置之间通过通信网络采用社交软件通信。
如图6所示,本发明的动作行为分析记录及重现的方法包括:
在步骤A中,采集目标对象的状态信息。本发明的动作行为分析记录及重现的方法可以应用于各种场合,根据不同的应用场合,目标对象分别可以是人、动物、机器装置、机器人、玩偶等。所采集的状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息等。之后,进入步骤B,分析状态信息,并根据状态信息生成相应的特征数据。在本发明的各个实施例中,特征数据包括:与状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据等。进一步地,动作特征数据包括动作特征代码和/或三维空间坐标数据及姿态角数据,情绪特征数据包括情绪特征代码。然后,在步骤C中,向至少一个动作行为展示装置发送特征数据。例如,该发送包括无线短距离发送、通过通信网络发送、和/或通过通信网络采用社交软件发送。该至少一个动作行为展示装置接收到特征数据后,进入步骤D,根据接收的特征数据重现目标对象的状态。其中,重现包括:以表情符号、图形、动画、动作模拟、发光、振动、制热、制湿、缩放和/或变形等方式中的一种或多种方式展示目标对象的状态信息。作为选择,本发明的动作行为分析记录及重现的方法还可包括步骤E(图中以虚线框表示是可选步骤),动作行为展示装置将展示控制信号发送给独立的动作模拟装置,以使所述独立的动作模拟装置重现目标对象的状态。在一实施例中,步骤E可以与步骤D可同时进行,即在步骤D中产生了展示控制信号之后,同时发送至动作行为展示装置自带的展示单元以及独立的动作模拟装置。
在本发明的一实施例中,特征数据中包含有与所述状态信息相关联的时间戳。例如,采集状态信息时的时间。步骤B和/或步骤D中还包括:存储特征数据,用以事后追踪、复制、编辑目标对象的状态。
根据本发明的一实施例,步骤C中包括同时发送所述状态信息的采集发送方(即采集发送所述状态信息的动作行为信息采集记录装置)的ID码,步骤D中包括对所述ID码进行验证,仅当验证通过时重现目标对象的状态。
在一实施例中,动作特征数据和情绪特征数据分别包括动作特征代码和情绪特征代码;所述步骤D包括:根据所述动作特征代码和/或情绪特征代码从数据库中查找相应的动作展示数据和/或情绪展示数据,并根据所述动作展示数据和/或情绪展示数据重现目标对象的动作和/或情绪。
以下是本发明动作行为分析记录及重现的系统及方法的应用实例。
在目前人们的生活中,有许多的事物看不见摸不着,想去进行更深入的了解又常找不到助手帮忙,例如想训练管理狗,狗经常跑得不知所踪,若能够有一个装置放在狗的身上就算狗跑到看不到的地方通过这个装置,我们可以约略地知道狗在一段时间内做了滚、跑、趴、站等动作或朝那个方向跑了多久等信息,在我们需要这些信息时启动手机或平板计算机等外部的接收装置就可以得到。另外,若是放在孩子身上也可以通过装置的分析知道孩子现在是坐、躺、站、跑、走、上楼、下楼等,甚至在如遭受到校园暴力的情况下可以通过孩子的手机发出紧急通知。而对于监狱受刑人、医院带传染性疾病的病人等,我们发现对于生活上的一些简单的行为与时间关联同步后,进行足够的记录并通过无线装置进行远程的监控、算法数据更新、保存内容提取等,可以在对被监控的目标对象,例如人、动物、物品,最不侵犯隐私的条件下做分析与保护。本发明分析记录及重现的系统中的动作行为信息采集记录装置本身最大的特点就是可以依据各种不同的应用场合使用无线或有线的方式调动传感器的原始数据,改变算法参数,取用分析结果,清理记录内容与改变各种信息消化取用条件,以在各种不同的使用环境下得到简单有效的数据协助分析与记录,然后将这些信息对应上智能手持装置(例如智能手机、平板电脑等)内的社交或交谈软件的表情、心情或动作符号或动画,造成属性指向很明确的自动信息内容产生机制,不断地发出与使用者密切关联的人、事、物的信息,其中若将此系统与智能装置内GPS系统及图资(包括图形、图像及地图资料)应用软件关联使用可以产生一个GPS-INS的导航系统可以有效的提高室外定位精度并给社交或交谈软件提供更有效的被监控物的位置信息,当然若是不是随身带有智能手持装置的被监控物就不具备这样的应用可能性,另外若此系统能与智能装置内带有室内定位应用系统及图资与PDR(个人航位推算)应用软件相互关联使用可以产生一个室内的导航系统,可以有效的提交给社交或交谈软件提供更有效的被监控物的室内活动位置信息,当然若是不是随身带有智能手持装置的被监控物就不具备这样的应用可能性。再有由于被监控的目标对象如动物或人有可能随身带有智能手持装置并通过这个智能手持装置发送信息到互联网进入云计算云存储甚或云分析让更多的关联人、事或物进行信息分享,与这个动作行为信息采集记录装置同在一个对象上的智能手持装置上有可能也带有另一组传感器,它也同样的能够侦测到不少的运动信息,另一个应用就是可以让两组放置在身上不同部位的传感器组可以做更多的信息捕捉及信息交换融合以取得更精确更多的动作信息分析结果,当然若智能手持装置上没带足够的传感器就不在此应用范围内。
本发明的一实施例中,通过例如惯性传感器及地磁、压力、温度、湿度等传感器构成的感测器,感测目标对象的行为、动作、振动、移动、方向、压力、温度、湿度等的变化,并将感测数据通过运算(后面的多种算法)得到动作特征及其它感测数据特征,这里以特征码表示,特征代码及感测器的ID码发送到动作行为展示装置如手机,动作行为展示装置将收到的特征码及ID码,通过对比ID码及特征码找到ID码及特征码所对应数据库中的图片、gif动画或其它图形类数据或音频或振动类型数据,并将之显示在屏幕上和/或通过音频播放器播放和/或通过控制动作行为展示装置的振动单元发出对应的振动。利用本发明可以形象地展示被监控的目标对象的状态,让用户一目了然,迅速做出决策避免由于文字的阅读而耽误时间。
具体应用:
1、抽水马达的工作状态监控,可以在马达上放置动作行为信息采集记录装置,通过无线方式将马达工作时的振动特征码和马达ID码发给手机,手机可以看到一个马达停止工作的画面或工作时的画面,同时还能感受到手机模拟马达工作的振动,或则以gif动画形式,展示马达工作时电流指针抖动、马达机身抖动的夸张的动画;
2、狗的检测:动作行为信息采集记录装置放在狗的身上,在手机上设定感测器的ID码为狗,可以在手机上看到狗的动作、抛跳、滚、爬等;
3、动作行为信息采集记录装置放在小孩身上:可以看到小孩的行为动作等;
4、动作行为信息采集记录装置放在老人身上:可以看到老人有没有摔倒等检测;
5、动作行为信息采集记录装置放在门窗上:可以看到门是否打开,窗户是否关闭等。
在一实施例中,动作行为信息采集记录装置由硬件部份和软件部分构成,硬件包括图2所示的各个部件,软件部份为社交或交谈的应用软件,整个系统的运作思路为,动作行为信息采集记录装置将被监控目标对象的最终状态分析及简化完后成为一个个被预设了的动作名称如跑、跳、坐、躺、滚动、方向等,然后借由无线发射装置通过通信网络将这些动作所对应的代码送进智能装置,而在智能装置内部已在使用中的社交或交谈软件(或动作代码转换为社交或交谈软件可对应的表情,心情或动作图画或gif动画)可以实时或事后取得微型动作分析记录器的动作对应代码,然后再将动作代码对应到表情、心情或动作图形或gif动画,如此就可以形成一个不断的把识别完成后的动作与图形或gif动画自动链接产生的被监控对象的概略动作内容。
以下将动作行为信息采集记录装置分为硬件的动作原理及如何与社交或交谈软件的表情、心情或动作图形和/或动画相互连接的方法的实施例。
动作行为信息采集记录装置的动作原理:
动作行为信息采集记录装置:通过在一个微小尺寸的装置内安装多种惯性传感器的航姿参考系统(AHRS)模块,以及磁,压力,温度,湿度等传感器来感测外部物体的运动及可能的环境概况,经过运算单元的运算后得到角加速度、角位移、直线加速度、直线位移、姿态角中的一种或多种,以及磁力大小变化、压力大小、温度高低、湿度的变化等值,并经过粒子扩展型卡尔曼滤波及数据融合处理,再将处理及融合后的数据送往小波能量分析与软件分类器,软件决策器做统计分类与辅助决策最后用概率神经网络的协助分析来判断及收敛最简化的目标物行为结果,因为本发明使用与集成了更多的传感器来搜集更多的信息来源,虽然提升了整个核心算法的难度但是在最后最简化的行为结果上,却更能得到更精确更细致的低误差判断,然后一方面通过有线或无线方式发送到外部接收装置,让外部用户通过外部接收装置及时了解目标对象当前的行为动作,另一方面也可以将行为动作结果加入时间戳与时间同步或按时间顺序进行存储,方便其它时间调用查看。本发明有助于长时间记录分析所有需要监测的运动、振动、移动轨迹等所有有规则或无规则的运动数据,通过统计分析更清楚这些运动所包含的意义,有助于人们对于自然界的各种物体的运动、行为或状态有更清晰的认识及进行合理的运用。
在一实施例中,动作行为展示装置是内置具有解读动作代码并与微型的动作行为信息采集记录装置能够对应通信的无线通信系统的智能手持装置。
a、智能手持装置通过通信网络与动作行为信息采集记录装置进行信息的传递与接收,收到动作信息代码。
b、通过动作信息代码与表情心情或动作图形动画的转换程序或已内置有转换功能的社交或交谈应用软件,将转换出并对应上了的动画或符号置入对话窗中。
c、提取信息的用户可以选取实时模式观看被监控的目标对象的状况也可以提取过去一段时间的记录观看,被监控的目标对象可以是个人、宝宝、长辈、病人、犯人、学生、车、门、窗、某些贵重物品、狗、猫等宠物,并且可以依不同的监控目标对像改变算法或动作分析识别库,也可以设置不同的状况处理门坎以发出安全警戒信息。
本发明的动作行为分析记录及重现的方法的一实施例中,包括如下步骤:
1)动作行为信息采集记录装置直接与动作行为展示装置通讯;
2)动作行为展示装置接收动作行为信息采集记录装置的分析结果,并通过内部程序转化以多种方式在屏幕上显示分析结果;(如在狗身上戴上动作行为信息采集记录装置,走动时,动作行为信息采集记录装置会感测狗的运动,并通过之前的多次测试记录的数据,在完成使用粒子扩展型卡尔曼数据滤波处理及传感器数据融合后,直接到步骤4)。
3)也可以也可以通过计算得到三维空间坐标,再进一步得到运动轨迹,再到步骤4);
4)利用小波能量分析技术找到并提取波形特征,将多种波形特征利用统计及概率神精网络的学习数据的方法分为多种动作行为,并将相似相近的归为同类,然后将所有动作特征与实际动作名称一一对应建成数据库,并设定对应动作编号;
5)当实际使用时,动作行为信息采集记录装置安装在狗的身上,动作行为信息采集记录装置感测狗的多种运动及动作,得到感测数据经过粒子扩展型卡尔曼滤波及数据融合后得到多种数据,通过计算得到三维空间坐标进一步得到的运动轨迹,再通过小波能量分析得到特征波形数据,然后利用概率神经网络的协助及分类器与判定树的统计对特征波形数据中分析出目前狗在进行的动作,并将动作对应的编号或结果发送给动作行为展示装置或存在动作行为信息采集记录装置的存储器中,一方面传送给动作行为展示装置如手机,手机会接收到信息后调用手机内程序显示文字狗在走动,或直接显示一只狗在走动。另一方面手机没有接收到信号,信号会保留在动作行为信息采集记录装置的存储器中,方便以后通过无线或有线方式提取。当小狗出现了一种以前没有过的动作时,通过决策树找不到对应的动作编号,此时运算单元采用神经网络学习的方法自动产生一个编号,并且提醒用户为未知动作,并且在用户的接收装置上通过动画方式重现动作轨迹,方便用户辨识动作特征,用户在接收器上输入新名称来命名新的动作。
动作行为信息采集记录装置也可以放在小孩身上,感测小孩的运动;监测小孩是否受到暴力伤害、跌倒等等。
动作行为信息采集记录装置可以放在水泵上,检测水泵的启动与停止的时间和次数,以及启动时振动大小及是否异常;这些都和平时的记录进行统计和比较。
在本发明的一些实施例中,动作行为信息采集记录装置
1)包括一外壳。该外壳是一种微型的如同纽扣大小的,便于固定在腰上、手臂上、头上、手腕上、吸附在铁壳上、粘附在玻璃上、直接放在地面上和房顶上等多种固定方式;
2)整个装置防水、避震;
3)装置内部具有统计功能块,用于统计同样的运动波形、轨迹等出现的次数、变异的大小、出现的时间、频率等等;
4)具有能量分析、决策树、分类器、概率神经网络学习、分析等功能单元,用于分析三维空间轨迹及运动波形,并通过统计数据的分析辨别给出各种低误差高精度多信息类型被简化了的结果,让监测人得知目前目标对象目前在干什么;
5)内部有多重模式可以通过外部接收装置发出的命令来改变;
6)取开电池内部有接口方便进行有线通讯;
7)采集单元由加速度传感器和/或陀螺仪构成,还可以带地磁传感器,以及还可以增加气压计,增加气压计可以监测记录装置所在环境的高度及高度变化;
8)还可以具有温度计;
9)第一通信单元包括短距无线通讯模块,包括但不限于:2.4G无线通讯、蓝牙、wifi、Zibee等。
在本发明的一实施例中,当动作行为展示装置是手机、计算机、平板电脑或智能电视时,除了可在显示屏上重现目标对象的状态信息外,还可将展示控制信号发送至独立的动作模拟装置(例如公仔玩偶或机器人),以控制一个或一群特定的独立的动作模拟装置如公仔玩偶或机器人。可以通过接收到信息的端口再经过手机(或计算机、平板、智能电视等各类智能装置)通过短距无线通信装置发送展示控制信号给特定装置,以控制这个特定装置如公仔玩偶或机器人进行动作行为模拟(如走、跑、跳、踢、抱、出拳、转身、躺和坐等)。这个模拟行为的动作可以是双向的,例如动作行为信息采集记录装置在互联网两端,一边在美国纽约,一边在中国上海,分别装在两个孩子身上,而这两个孩子手上分别有一个代表对方的玩偶,孩子可以与玩偶对话而玩偶将对话信息传递给太平洋彼岸的对方,对方的喜怒哀乐或行为与这一方孩子的玩偶产生实时的互动与关联,并且双方父母亲可以通过Line或微信不需用视频以最少的信息带宽,看到与孩子的动作相互关联的图形示意。当然这个用法也可以使用在各个可能的对象身上如宠物互动、教学、训练或医治特定精神病患等用途上。
本发明动作行为分析记录及重现的系统及方法还可以如下模式应用。
1、对多群体广播模式:
代表目标对象的状态信息的特征数据经处理后产生展示控制信号,在动作行为展示单元以图形或动画展示时,还可将展示控制信号发送给其它特定的装置(可在身上或身边)再做应用。例如那些在互联网远程的人们(或物体)身边有一个机器玩偶或装置(可在身上或身边),玩偶或装置(可在身上或身边)通过无线的方式收到被提取出来的展示控制信号,并做出与目标对象(例如人或物)一样的动作如跑、蹲、爬、扭……等,而这些接收信息的人们(或物体)也可以通过贴附或安装在自己身上的动作行为信息采集记录装置将自己的行为表现在目前正在接收信息的人或物身边的玩偶或装置(可在身上或身边),当然在广播模式里需在双方获得彼此的授权后才能进行双向互动。
2、信息收发双方双向互动模式:
目标对象(被贴附动作行为信息采集记录装置的人或物),自身也能有一个玩偶在取得另一方的授权后可以接收到对方的行为分析结果并做出记录或仿真,这一个可以仿真出动作行为特征的玩偶或装置(可在身上或身边)具有两种能力,一个是信息的接收者,以收到的信息为仿真主题并做出类似的动作,另一个是可以反向变成输入设备,因为在玩偶或装置(可在身上或身边)的特定地方如手臂,头或脚上装有传感器,可以由身边的人或物不通过贴附或装置在自身的行为记录仿真装置送出与自身相关的信息,改由玩偶或装置(可在身上或身边)当被拉起手臂扭转头或做出蹲下的动作将信息传送到对方并由对方的玩偶或装置(可在身上或身边)做出一致的动作。
3、可与游戏及带有控制信息轨道的影片或动画进行远程或本地的互动:
信息发布者(被贴附动作行为信息采集记录装置的物体),可以通过各种有线或无线接口与计算机、智能电视、游戏机、移动智能装置或能输出入控制信息的特定播放设备(如蓝光播放器)通信,与这些不同的娱乐内容随着剧情发展进行互动,所谓的互动是让信息发布者随着剧情发展做出相应的行为如蹲,跑,跳,卧等动作,而娱乐内容则通过自身的剧情或软件安排控制信息发布者身边或身上的玩偶或装置做出相互呼应互动的行为。
4、被分析记录下的信息可以如同媒体播放器一般的进行反复播送,回放,暂停,复制,编辑等,这些被处理过的信息可以在动作行为展示装置上被重复展示、仿真。
5、远程互动的双方的情绪特征可以被取用。除了一样地以图形或动画方式反应在社交软件上,也一样可以用不同的形式表达在双方身边或身上所拥有的装置上,如心跳节奏可以在玩偶的心脏处有一个对应的LED灯会跟着对方心跳的节奏或强度改变明灭的速度及亮度,当然通过电机带动偏心轮产生振动感觉也是一种方法,其它如体温、特定部位皮肤的湿度等,当传感器能取得更多的身体情绪特征信息越能表达互动双方的感情特征。
6、互动双方所取用对象或自身器官的形状、体积、大小、长短、深浅、弯曲等空间物理特征可以被度量并以对等或夸张的形式反应在身上或身边的装置。例如双方身边的装置是为一个内附充气及放射状活动支架结构的球体,当某方以拳头做比喻说我的拳头有你身边的球那么大,通过不同的度量方法,如使用尺去量直径然后通过软件传送到对方并控制对方球内的充气装置让球体膨胀或缩小以产生及模拟出跟拳头的对应关系。另一个方法是将拳头捅入一个内带传感器的容器内可以直接度量出拳头的直径大小并自动送出相关数据改变对方球体的大小,另外通过球体内的放射状活动支架结构可以将球体变化成趋近于三角型,方型或多边型,这些技术均是非常成熟的现用技术,在此不再多做描述。
通过上述实施例的描述,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,是可以通过计算机程序来指令相关的硬件完成,所述的程序可存储于一计算机可读取介质中,该程序在执行时,可包括如上述各方法的实施例的的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属于发明所涵盖的范围。
Claims (16)
1.一种动作行为分析记录及重现的系统,其特征在于,包括:
至少一个动作行为信息采集记录装置,以及通过通信网络与所述至少一个动作行为信息采集记录装置通信连接的至少一个动作行为展示装置;其中,
所述动作行为信息采集记录装置包括:
采集单元,用于采集目标对象的状态信息;
第一处理单元,用于分析所述状态信息,并根据所述状态信息生成相应的特征数据;
第一存储单元,用于存储所述特征数据;及
第一通信单元,用于向所述至少一个动作行为展示装置发送所述特征数据;
所述动作行为展示装置包括:
第二通信单元,用于接收所述至少一个动作行为信息采集记录装置发送的特征数据;
第二处理单元,用于对所述特征数据进行处理,并根据处理结果发出展示控制信号;及
展示单元,用于根据所述展示控制信号,重现目标对象的状态;
其中,
所述状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息;
所述特征数据包括与所述状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据;
所述动作特征数据包括动作特征代码和/或三维空间坐标数据及姿态角数据,所述情绪特征数据包括情绪特征代码。
2.根据权利要求1所述的动作行为分析记录及重现的系统,其特征在于,
所述动作行为信息采集记录装置中的第一处理单元包括:
根据情绪信息生成情绪特征代码的模块;
根据动作信息生成动作特征代码的模块;和/或
根据动作信息生成三维空间坐标数据及姿态角数据的模块;
所述动作行为展示装置包括:
第二存储器,用于存储数据库,所述数据库中包含所述动作特征代码与动作展示数据的动作对照表,和/或所述情绪特征代码与情绪展示数据的情绪对照表;
其中,第二处理单元对所述特征数据进行处理包括:根据所述动作特征代码和/或情绪特征代码从数据库中查找相应的动作展示数据和/或情绪展示数据,以生成所述展示控制信号。
3.根据权利要求2所述的动作行为分析记录及重现的系统,其特征在于,
所述动作行为信息采集记录装置中的所述采集单元包括用于感测所述目标对象的动作、情绪、生命体征、形状和/或尺寸信息并产生相应的感测数据的传感器和/或度量器;其中,所述传感器包括加速度传感器、陀螺仪、地磁传感器中的一种或多种。
4.根据权利要求1-3中任一项所述的动作行为分析记录及重现的系统,其特征在于,所述动作行为信息采集记录装置包括防水及避震外壳,所述采集单元、第一处理单元、第一通信单元,以及用于为所述动作行为信息采集记录装置供电的纽扣电池均安置在所述外壳内。
5.根据权利要求2或3所述的动作行为分析记录及重现的系统,其特征在于,
所述动作行为展示装置为计算机、智能电视或移动终端设备,其以图形和/或动画形式重现所述目标对象的动作、情绪、形状和/或尺寸,且所述动作行为信息采集记录装置与所述计算机、智能电视或移动终端设备通过所述通信网络采用社交软件通信;或者
所述动作行为展示装置为机器人、机器装置和/或智能玩偶,其以动作模拟、发光、振动、制热和/或制湿形式重现所述目标对象的状态,所述状态包括动作、心跳节奏、体温和/或湿度;或者
所述动作行为展示装置为内附充气泵及放射状活动支架结构的气球,其以缩放及变形方式重现所述目标对象的形状和/或尺寸。
6.根据权利要求1-3中任一项所述的动作行为分析记录及重现的系统,其特征在于,所述动作行为展示装置中的展示单元包括独立的动作模拟装置,其通过有线或无线短距离通信方式接收所述第二处理单元发出的展示控制信号;其中,所述独立的动作模拟装置包括机器人、机器装置和/或智能玩偶。
7.根据权利要求1-3中任一项所述的动作行为分析记录及重现的系统,其特征在于,所述特征数据还包含采集发送状态信息的动作行为信息采集记录装置的ID码和/或与所述状态信息相关联的时间戳,所述动作行为展示装置根据接收到的所述至少一个动作行为信息采集记录装置发送的特征数据中所包含的状态信息、所述ID码和/或所述时间戳同时或顺序重现目标对象的状态。
8.一种动作行为分析记录及重现的系统,其特征在于,包括:
至少两个动作行为信息采集及展示装置,其中,
所述动作行为信息采集及展示装置包括:
采集单元,用于采集目标对象的状态信息;
处理单元,用于分析所采集的状态信息,并根据所采集的状态信息生成相应的特征数据;以及根据接收到的特征数据产生展示数据;
通信单元,用于发送和接收特征数据;
展示单元,用于根据所述展示数据重现目标对象的动作、形状和/或尺寸;
其中,
所述状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息;
所述特征数据包括与所述状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据;
所述动作特征数据包括动作特征代码和/或三维空间坐标数据及姿态角数据,所述情绪特征数据包括情绪特征代码。
9.根据权利要求8所述动作行为分析记录及重现的系统,其特征在于,
所述至少两个动作行为信息采集及展示装置之间无线短距离通信连接和/或通过通信网络远程通信连接,或者,
所述至少两个动作行为信息采集及展示装置均连接于带数据及控制通道的媒体播放器,以同时在所述媒体播放器和所述动作行为信息采集及展示装置上重现所述目标对象的动作、形状和/或尺寸。
10.根据权利要求8所述动作行为分析记录及重现的系统,其特征在于,所述至少两个动作行为信息采集及展示装置之间通过通信网络采用社交软件通信。
11.一种动作行为分析记录及重现的方法,其特征在于,包括如下步骤:
A:采集目标对象的状态信息;
B:分析所述状态信息,并根据所述状态信息生成相应的特征数据;
C:向至少一个动作行为展示装置发送所述特征数据;
D:所述至少一个动作行为展示装置接收至少一个动作行为信息采集记录装置发送的特征数据并根据所述特征数据产生展示控制信号,以重现所述目标对象的状态;
其中,
所述状态信息包括动作信息、情绪信息、生命体征信息、形状信息和/或尺寸信息;
所述特征数据包括与所述状态信息相对应的动作特征数据、情绪特征数据、生命体征特征数据、形状特征数据和/或尺寸特征数据;
所述动作特征数据包括动作特征代码和/或三维空间坐标数据及姿态角数据,所述情绪特征数据包括情绪特征代码。
12.根据权利要求11所述动作行为分析记录及重现的方法,其特征在于,
所述特征数据中包含有与所述状态信息相关联的时间戳;
所述步骤B和/或步骤D还包括:
存储所述特征数据,用以事后追踪、复制、编辑目标对象的状态。
13.根据权利要求11或12所述动作行为分析记录及重现的方法,其特征在于,步骤C中包括同时发送采集发送所述状态信息的动作行为信息采集记录装置的ID码,
步骤D中包括对所述ID码进行验证,仅当验证通过时重现目标对象的状态。
14.根据权利要求13所述动作行为分析记录及重现的方法,其特征在于,
所述步骤C中的所述发送包括无线短距离发送、通过通信网络发送、和/或通过通信网络采用社交软件发送。
15.根据权利要求13所述动作行为分析记录及重现的方法,其特征在于,所述步骤D包括:
D2、根据所述动作特征代码和/或情绪特征代码从数据库中查找相应的动作展示数据和/或情绪展示数据,并根据所述动作展示数据和/或情绪展示数据重现目标对象的动作和/或情绪。
16.根据权利要求15所述动作行为分析记录及重现的方法,其特征在于,包括步骤E,动作行为展示装置将展示控制信号发送给独立的动作模拟装置,以使所述独立的动作模拟装置重现目标对象的状态。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310254297.XA CN103369303B (zh) | 2013-06-24 | 2013-06-24 | 动作行为分析记录及重现的系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310254297.XA CN103369303B (zh) | 2013-06-24 | 2013-06-24 | 动作行为分析记录及重现的系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103369303A CN103369303A (zh) | 2013-10-23 |
CN103369303B true CN103369303B (zh) | 2016-08-17 |
Family
ID=49369719
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310254297.XA Active CN103369303B (zh) | 2013-06-24 | 2013-06-24 | 动作行为分析记录及重现的系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103369303B (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103761083B (zh) * | 2013-12-31 | 2017-04-05 | 华为技术有限公司 | 一种数据分享方法、装置及终端 |
CN105721513A (zh) * | 2014-04-21 | 2016-06-29 | 张时铭 | 一种采用无线互联网方式对孩子行为进行研究的系统 |
CN104244059A (zh) * | 2014-09-25 | 2014-12-24 | 苏州乐聚一堂电子科技有限公司 | 活动感应远程音视频互动系统 |
CN104394481B (zh) * | 2014-09-30 | 2016-09-21 | 腾讯科技(深圳)有限公司 | 视频播放方法及装置 |
CN104468981B (zh) * | 2014-11-14 | 2017-06-23 | 哈尔滨工业大学 | 一种基于智能手机平台的校园霸凌检测方法 |
CN104941168B (zh) * | 2015-06-26 | 2017-03-01 | 江苏易合大成网络科技有限公司 | 基于可佩戴设备的足球比赛回放系统及回放方法 |
CN105044386A (zh) * | 2015-06-29 | 2015-11-11 | 中国农业大学 | 一种水生动物行为监测传感器 |
AU2016308097B2 (en) * | 2015-08-15 | 2018-08-02 | Salesforce.Com, Inc. | Three-dimensional (3D) convolution with 3D batch normalization |
CN105205756A (zh) * | 2015-09-15 | 2015-12-30 | 广东小天才科技有限公司 | 一种行为监控的方法和系统 |
JP2017151517A (ja) * | 2016-02-22 | 2017-08-31 | 富士ゼロックス株式会社 | ロボット制御システム |
CN106017468A (zh) * | 2016-05-06 | 2016-10-12 | 深圳市沃特沃德股份有限公司 | 一种监控动物状态的方法、装置及系统 |
AU2017276810B2 (en) * | 2016-06-08 | 2023-03-16 | Commonwealth Scientific And Industrial Research Organisation | System for monitoring pasture intake |
CN105847769A (zh) * | 2016-06-16 | 2016-08-10 | 苏州安控物联网科技有限公司 | 一种建筑现场行为分析系统及分析方法 |
CN107464188A (zh) * | 2017-06-23 | 2017-12-12 | 浙江大学 | 一种基于物联网情绪感知技术的互联网社交应用系统 |
CN107292345A (zh) * | 2017-07-03 | 2017-10-24 | 贵州大学 | 隐私情境检测方法 |
CN108447572B (zh) * | 2018-01-16 | 2020-10-27 | 深圳市智能机器人研究院 | 核反应堆安全壳钢内衬空鼓自动检测系统及方法 |
CN110111777A (zh) * | 2018-02-01 | 2019-08-09 | 阿里巴巴集团控股有限公司 | 远程设备、用户设备、状态信息发送及接收方法和装置 |
CN111587809A (zh) * | 2019-02-20 | 2020-08-28 | 深圳先进技术研究院 | 一种运动监测系统 |
CN110489028B (zh) * | 2019-07-11 | 2021-12-24 | 联想(北京)有限公司 | 一种控制方法、电子设备及计算机存储介质 |
CN112136699B (zh) * | 2020-09-11 | 2022-07-15 | 北京希诺谷生物科技有限公司 | 一种利用多单元装置评价犬与犬社交能力的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101363743A (zh) * | 2007-08-06 | 2009-02-11 | 索尼株式会社 | 信息处理设备、系统及其方法 |
CN101820399A (zh) * | 2010-01-22 | 2010-09-01 | 曾超宁 | 形象表达情感信息的触觉通讯玩偶 |
CN102271241A (zh) * | 2011-09-02 | 2011-12-07 | 北京邮电大学 | 一种基于面部表情/动作识别的图像通信方法及系统 |
CN102780651A (zh) * | 2012-07-21 | 2012-11-14 | 上海量明科技发展有限公司 | 在即时通信消息中加注情绪数据的方法、客户端及系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070074114A1 (en) * | 2005-09-29 | 2007-03-29 | Conopco, Inc., D/B/A Unilever | Automated dialogue interface |
-
2013
- 2013-06-24 CN CN201310254297.XA patent/CN103369303B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101363743A (zh) * | 2007-08-06 | 2009-02-11 | 索尼株式会社 | 信息处理设备、系统及其方法 |
CN101820399A (zh) * | 2010-01-22 | 2010-09-01 | 曾超宁 | 形象表达情感信息的触觉通讯玩偶 |
CN102271241A (zh) * | 2011-09-02 | 2011-12-07 | 北京邮电大学 | 一种基于面部表情/动作识别的图像通信方法及系统 |
CN102780651A (zh) * | 2012-07-21 | 2012-11-14 | 上海量明科技发展有限公司 | 在即时通信消息中加注情绪数据的方法、客户端及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN103369303A (zh) | 2013-10-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103369303B (zh) | 动作行为分析记录及重现的系统及方法 | |
US11858118B2 (en) | Robot, server, and human-machine interaction method | |
WO2018171223A1 (zh) | 一种看护机器人的数据处理方法及装置 | |
CN106956271B (zh) | 预测情感状态的方法和机器人 | |
CN107289949B (zh) | 一种基于人脸识别技术的室内导识装置及方法 | |
CN103357177B (zh) | 使用便携式游戏装置来记录或修改在主游戏系统上实时运行的游戏或应用 | |
US20190188903A1 (en) | Method and apparatus for providing virtual companion to a user | |
CN104919396B (zh) | 在头戴式显示器中利用身体握手 | |
JP2020507835A5 (zh) | ||
JP2021170341A (ja) | ゲームプレイを介して環境の詳細データセットを生成する方法およびシステム | |
CN108096807A (zh) | 一种运动数据监测方法和系统 | |
JP2005110869A (ja) | 記録装置、及び記録方法 | |
Chen et al. | Using real-time acceleration data for exercise movement training with a decision tree approach | |
CN107402633B (zh) | 一种基于图像模拟技术的安全教育方法 | |
JP7375770B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
WO2016136104A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
CN108335747A (zh) | 认知训练系统 | |
KR20180022674A (ko) | 위치-특정 게임화를 포함하는, 신체적으로 수행된 기능의 센서-기반 모니터링에 의해 게임화가 가능하도록 구성된 구조, 장치 및 방법 | |
CN113694343A (zh) | 一种基于vr技术的沉浸式抗压力心理训练系统及方法 | |
Nan et al. | Human action recognition for social robots | |
CN112037090B (zh) | 基于vr技术和6dof姿态跟踪的知识教育系统 | |
CN107292221A (zh) | 一种轨迹处理方法和装置、一种用于轨迹处理的装置 | |
WO2020153038A1 (ja) | 情報処理装置、および情報処理方法 | |
Mastorakis | Human fall detection methodologies: from machine learning using acted data to fall modelling using myoskeletal simulation | |
CN110957021A (zh) | 一种针对自闭症患者的逻辑思维能力训练方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20230913 Address after: 200000 building 6, No. 4299, Jindu Road, Minhang District, Shanghai Patentee after: Tongliu (Shanghai) Information Technology Co.,Ltd. Address before: 518049, Guangdong, Shenzhen Futian District Meilin Road, No. three, blue sky green homes on the third floor of the annex Patentee before: SHENZHEN YUHENG INTERACTIVE TECHNOLOGY DEVELOPMENT Co.,Ltd. |