CN107532922A - 通过电场感测和加速度计的组合的骑车活动识别 - Google Patents

通过电场感测和加速度计的组合的骑车活动识别 Download PDF

Info

Publication number
CN107532922A
CN107532922A CN201680021642.7A CN201680021642A CN107532922A CN 107532922 A CN107532922 A CN 107532922A CN 201680021642 A CN201680021642 A CN 201680021642A CN 107532922 A CN107532922 A CN 107532922A
Authority
CN
China
Prior art keywords
data
electronic equipment
signature
sensor
electrostatic field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680021642.7A
Other languages
English (en)
Other versions
CN107532922B (zh
Inventor
L·马腾森
M·米德霍特
A·罗德泽夫斯基
亨里克·本特松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Mobile Communications AB
Original Assignee
Sony Ericsson Mobile Communications AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Ericsson Mobile Communications AB filed Critical Sony Ericsson Mobile Communications AB
Publication of CN107532922A publication Critical patent/CN107532922A/zh
Application granted granted Critical
Publication of CN107532922B publication Critical patent/CN107532922B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01DMEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
    • G01D21/00Measuring or testing not otherwise provided for
    • G01D21/02Measuring two or more variables by means not covered by a single other subclass
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B21/00Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1118Determining activity level
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/2415Measuring direct current [DC] or slowly varying biopotentials
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/681Wristwatch-type devices
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01HMEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
    • G01H3/00Measuring characteristics of vibrations by using a detector in a fluid
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R29/00Arrangements for measuring or indicating electric quantities not covered by groups G01R19/00 - G01R27/00
    • G01R29/08Measuring electromagnetic field characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0223Magnetic field sensors

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Dentistry (AREA)
  • Physiology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Electromagnetism (AREA)
  • Telephone Function (AREA)

Abstract

用于确定用户活动的设备和方法,其包括或限定多个基准签名,每个基准签名与用户活动的类型相对应,并具有从代表变化的静电场的第一数据和代表运动的第二数据形成的数据。从第一传感器获取响应于变化的静电场的数据,并从第二传感器获取响应于运动的数据。将第一数据与第二数据相组合,并基于所组合的第一数据和第二数据与多个基准签名的比较,来识别用户活动。

Description

通过电场感测和加速度计的组合的骑车活动识别
相关申请数据
本申请要求2015年4月14日提交的美国非临时申请第14/685,710号的优先权,其全部内容通过引入而并入本文。
技术领域
本公开的技术总体上涉及电子设备,更具体地,涉及用于通过由用户携带或佩戴的电子设备来增强用户活动检测的技术。
背景技术
诸如智能电话、智能手表、腕带等这样的电子设备可以包括能够跟踪身体活动的应用(APP)。这可以包括:例如,距离测量(例如,人步行或跑步了多远)、平均速度测量(例如,人步行或跑步多快)、心率测量,燃烧的卡路里等。
为了检测身体活动,电子设备通常包括加速度计,该加速度计可以检测电子设备的活动,进而检测用户的活动。例如,呈智能手表形式的电子设备可以佩戴在用户的手腕上。在用户进行身体活动时,用户的手臂(进而电子设备)经历活动的运动特征。对应于特征运动的数据可以由加速度计检测,并在电子设备内进行分析,以确定活动的类型以及与活动有关的任何信息。
用于检测用户活动的常规方法的问题在于:它们依赖于电子设备所附接(佩戴)或保持到的身体部分的运动。通常,电子设备佩戴在手腕(智能手表、智能手环)上或上臂(例如,mp3播放器、智能手机)上。当特定活动不包括手臂的运动(或显著运动)时,电子设备的这种定位可能是有问题的。例如,当骑车时,用户的手臂相对静止,因而,检测骑车时的身体活动可能是困难的。
发明内容
为了增强通过电子设备对身体活动的检测,本公开描述了采用与静电场(EF:electric field)传感器相结合的加速度计的检测方法和设备。通过将从传感器收集到的数据与对应于预定活动的数据进行比较,可以更准确地确定用户的身体活动。
根据本公开的一个方面,该电子设备包括:静电场传感器,该静电场传感器用于检测静电场;至少一个其它传感器,该至少一个其它传感器用于检测运动或声音中的一个;以及控制电路,该控制电路操作用于确定由用户进行的活动,该控制电路被配置为,从静电场传感器数据获取第一数据,该第一数据对应于与电子设备有关的静电场;从至少一个其它传感器数据获取第二数据,该第二数据对应于电子设备的运动;从第一数据和第二数据形成特征签名(characteristic signature);并且基于该特征签名与多个基准签名的比较,来识别用户活动,其中每个bas。
根据本公开的另一方面,一种确定用户活动的方法,该方法包括如下步骤:限定多个基准签名,每个基准签名对应于用户活动的类型,并且包括从代表变化的静电场的第一数据和代表运动的第二数据形成的数据;从第一传感器获取响应于变化的静电场的数据;从第二传感器获取响应于运动的数据;从第一数据和第二数据的组合形成特征签名;并且基于该特征签名与多个基准签名的比较,来识别用户活动。
为了实现前述及相关目的,该设备和方法包括以下说明书中完整描述并在权利要求中具体指出的特征,以下说明和附图详细阐述了某些说明性实施方式,这些实施方式能够指示可以适当采用本发明原理的多种方式中的几种。
尽管相应附图/实施方式已描述并例示了各种特征,但是应当理解的是,给定附图或实施方式的特征可以用在本发明的一个或多个其它附图或实施方式中。
附图说明
图1是例示了根据本公开的、确定用户活动的示例性方法的流程图。
图2是根据本公开的、示例性特征签名的因素的图形表示。
图3是根据本公开的、包括活动检测功能的电子设备的示意性框图。
图4A例示了根据本公开的、可以用于存储一个或多个签名的示例性数据库。
图4B例示了作为多维度数据库/历史记录的图4A的数据库。
具体实施方式
现将参照附图来描述实施方式,其中,相同附图标记始终用于表示相同元件。可以理解的是,这些附图不必按比例绘制。此外,针对一实施方式描述和/或例示的特征,可以以相同方式或类似方式在一个或多个其它实施方式中和/或与其它实施方式的特征相结合或代替其它实施方式的特征来使用。
本公开描述了一种用于确定用户活动的设备和方法。在这方面,可以预定多个基准签名并将其存储在数据库等中,每个基准签名对应于用户活动的类型。例如,第一预定的基准签名可以对应于用户步行,另一个可以对应于用户跑步,另一个可以对应于用户骑车,另一个可以对应于用户乘坐机动车辆,另一个可以对应于用户乘坐飞机,另一个可以对应于用户在家庭/建筑物内锻炼等。预定的基准签名可以从多个不同类型的数据形成。
例如,在一实施方式中,预确定的基准签名可以从代表变化的静电场的第一数据和代表运动的第二数据形成。在另一实施方式中,基准签名可以从三种或更多种类型的数据形成。例如,基准签名可以从代表变化的静电场的第一数据、代表运动的第二数据、以及代表声音的第三数据形成。
然后,基于从用户和/或用户的直接环境获取的多种不同类型的数据,来确定用户活动的特征签名。例如,可以从响应于变化的静电场的第一传感器获取第一数据,并且可以从响应于用户或用户的部分的运动的第二传感器获取第二数据。第一数据可以与第二数据相组合以形成特征签名,并且该特征签名可以用作在数据库中搜索预定的基准签名的基础。在找到与特征签名相对应的基准签名时,可以将与相应基准签名相关联的用户活动识别为用户正执行的活动。
在一实施方式中,第一数据对应于与用户有关的静电场。例如,当用户移动不同身体部分(例如,左腿或右腿,左臂或右臂等)时,这些移动的身体部分与环境静电场的相互作用发生变化。静电场的这种变化可以由静电场传感器检测,并用于形成特征签名的至少一部分。
在另一实施方式中,第一数据对应于车辆点火系统的打火。例如,内燃机具有控制每个火花塞打火的电子设备。随着发动机转速的变化,火花塞的打火也发生变化。可以通过静电场传感器检测这种打火,当与由加速度计或其它传感器产生的数据相组合时,静电场传感器可以形成用户乘坐机动车辆的特征签名。
在又一实施方式中,第一数据对应于电源的电频率。例如,当电子设备在房屋或其它结构的范围内时,房屋/结构内的电力可以由静电场传感器检测。这种电力可以是以50或60Hz工作的A/C电源。可以使用由电力引起的静电场的变化,来形成房屋/结构内用户的特征签名。
静电场的变化还可以用于识别用户在飞行器中。更具体地,飞行器的动力系统具有与其它动力系统不同的签名。电力系统对与用户有关的静电场的影响可以通过静电场传感器采集,并用于形成与飞行器中的用户相对应的特征签名。
针对第二类型的数据,加速度计、陀螺仪或磁力计中的至少一种可以用作用于收集第二数据的传感器。如上所述,这种第二数据可以与第一数据融合(也称为传感器融合(sensor fusion)),以形成可用于确定用户活动的特征签名。
在再一实施方式中,声音数据可用于形成特征签名。例如,骑车可能产生这种活动所独有的声音。这种声音可以包括:例如由链条和链轮、齿轮移动(如果是多速自行车)产生的声音、踏板的声音、刹车的声音、由车轮/轮幅切穿空气产生的声音等。同样地,当在飞行器中时,机舱内的声音是飞行器(例如,无人机)所独有的。电子设备的麦克风可以收集这种声音数据,然后该声音数据可以与静电场传感器数据和/或加速度计数据相组合,以进一步限定特征签名,并提供与用户活动有关的增强数据。
首先参照图1,图1例示的是描绘通过电子设备检测用户活动的示例性方法的流程图。虽然该方法说明和流程图可以示出执行步骤的具体顺序,但是执行步骤的顺序可以相对于所描述的顺序改变。而且,连续描述的两个或多个步骤可以同时或部分同时地执行。可以省略所描述或所例示的步骤中的一个或多个。
可以使用存储在一个或多个非暂时性计算机可读介质(例如,闪速存储器、只读存储器(ROM)、随机存取存储器(RAM)、缓存、或存储有任何持续时间(例如,延长时间段、永久、短时、用于暂时缓冲、和/或用于缓存信息)的信息的任何其它存储介质)上的编码指令(例如,计算机可读指令)来实现图1的示例性方法。如本文所使用的,术语“非暂时性计算机可读介质”被明确地定义为包括任何类型的计算机可读介质并且排除传播信号。典型的非暂时性计算机可读介质包括:电子存储器件、磁性存储器件以及光学存储器件。该方法可以通过电子设备执行。在一实施方式中,为了执行该方法,具体体现该方法的逻辑指令由电子设备的处理器来执行。另选地,该方法可以至少部分地在电子设备(例如,专用集成电路(ASIC)等)的硬件中实现。
该方法可以开始于步骤10,其中,使用静电场传感器来收集第一数据。静电场传感器通过检测人周围的静电场的变化来进行操作。更具体地,传感器依赖于存在于身体周围的静态(DC)场并且测量静态场的变化。在这方面,用户的身体电容性地耦合到传感器的局部接地面,并耦合到环境,同时传感器的局部接地面电容性地耦合到环境。通过测量传感器的局部接地面与身体之间的电压,可以推断身体/身体部分的运动。静电场传感器是本领域公知的,因此为了简洁起见,省略了此类传感器的更多细节。
接下来,在步骤12中,使用不同于静电场传感器的第二传感器来收集第二数据。该传感器可以是例如加速度计、陀螺仪和/或磁力计中的任一个。根据具体应用,可以使用其它传感器。步骤12中第二数据的收集可以与步骤10中第一数据的收集同时进行。换句话说,经由第一(静电场)传感器的数据收集和经由第二传感器的数据收集可以同时或基本上同时进行。
在步骤14中,可以组合第一数据和第二数据,以形成与用户活动相对应的特征签名。如本文所使用的,术语“特征签名”被限定为随时间收集的多种不同类型的数据的组合。例如,参照图2,特征签名26可以是由静电场数据26a、加速度数据26b、声音数据26c、或可以在活动期间捕捉到的任何其它数据所限定的数据流。将可以使用不同类型的传感器来收集的不同类型的数据进行组合,以形成限定特征签名的数据流,其中,对应于相同时刻的不同类型的数据可以链接在一起。
导出特征签名所经过的时间段t可以是短的(例如,瞬时时刻),以便形成所收集的数据的快照。另选地或另外地,可以延长导出特征签名所经过的时间t(t跨越大于瞬时时刻的时间),以形成数据流(例如,在时间段t期间的连续数据流)。在一实施方式中,将特征签名表示为三维图。
重新参照图1,在步骤16中,使用特征签名作为搜索数据存储(例如,电子设备可访问的数据库,包括多个预定的基准签名的数据库)的基础。存储在数据库中的每个预定的基准签名可以对应于特定类型的活动,例如,跑步、骑车等。例如,每个基准签名可以具有与其相关联的、被执行以创建基准签名的特定活动。每个基准签名的活动可以存储在数据库中,并与相应的签名相关联。
在搜索与特征签名相对应的基准签名的数据库的过程中,可以执行各个签名的比较。比较可以包括:确定各个签名之间是否存在幅度和/或频率的偏差,签名事件的位置的相似性和/或差异性(例如,以特定间隔发生或未发生的加速度事件和/或电场事件),谐波频率的相似性和/或差异性等。
如果在步骤18中,确定了特征签名不匹配或以其它方式对应于存储在数据库中的基准签名,则该方法进行到步骤20,其中,生成了指示系统无法确定活动的消息。这种消息可以在电子设备的显示器上输出,并且可以包括或可以不包括可听告警。另外地或另选地,该消息可以存储在应用日志文件或其它文件中,以供稍后检索和/或分析使用。然后,该方法返回到步骤10并重复。
返回到步骤18,如果确定了特征签名确实匹配或以其它方式对应于存储在数据库中的基准签名,则该方法进行到步骤22,其中,从数据库检索与匹配基准签名相关联的活动。以这种方式,可以准确地确定用户执行了哪个活动。
在步骤24中,其它数据可以被收集并与所确定的活动相关联。例如,可以基于由静电场传感器和/或加速度计提供的数据来计算距离信息。同样地,还可以计算活动所消耗的能量消耗(例如卡路里)。应当理解的是,如由一个或多个应用和/或用户输入指定的,可以计算其它信息。在收集和/或处理数据时,该方法返回到步骤10并重复。
上述方法可以由电子设备30执行,其示例在图3中例示出。电子设备30可以是任何类型的电子设备,其中,其期望限制从电子设备的电池中抽取的峰值电流,其示例包括智能手表、头戴式耳机、媒体播放器、游戏设备、通讯器、便携式通信设备、手镯、太阳帽,附接到手臂的手机、戒指等。
电子设备30包括活动检测功能2,该活动检测功能2被配置为确定用户所执行的活动,如参照图1和图2描述的。
电子设备30可以包括显示器32。显示器32向用户显示诸如运行状态、时间、电话号码、联系人信息、各种菜单等这样的信息,该信息使得用户能够利用电子设备30的各种特征。显示器32还可以用于可视地显示由电子设备30接收到和/或从电子设备30的存储器34检索到的内容。显示器32可以用于向用户呈现诸如照片、移动电视内容、因特网页面以及与游戏相关联的视频这样的图像、视频和其它图形。
按钮36提供各种用户输入操作,并且在被实现为智能手表的电子设备中可以沿着智能手表的侧面或边缘布置。例如,按钮36可以包括:用于允许输入信息的按钮、特殊功能按钮(例如,呼叫发送和应答按钮、多媒体播放控制按钮、相机快门按钮等中的一个或多个)、导航和选择按钮、或指点设备等。按钮或按钮式功能还可以实现为与显示器32相关联的触摸屏。此外,显示器32和按钮36可以彼此结合使用,以实现软键功能。
电子设备30包括使得电子设备30能够建立与另一设备进行通信的通信电路。通信可以包括:呼叫、数据传输等。呼叫可以采取任何适当的形式,例如但不限于语音呼叫和视频呼叫。例如,呼叫可以通过蜂窝电路交换网络来执行,或者可以呈互联网语音协议(VoIP)呼叫的形式,该互联网语音协议(VoIP)呼叫通过蜂窝网络的分组交换能力或替代分组交换网络(例如,与IEEE 802.11兼容的、通常称为WiFi的网络,或者与IEEE 802.16兼容的、通常称为WiMAX的网络)建立。数据传输可以包括但不限于:接收流式传输内容(例如,流式音频、流式视频等)、接收数据馈送(例如,推送数据、播客、真正简单聚合(RSS)数据馈送数据馈送)、下载和/或上传数据(例如,图像文件、视频文件、音频文件、铃声、因特网内容等)、接收或发送消息(例如,文本消息、即时消息、电子邮件消息、多媒体消息)等。该数据可以由电子设备30处理,包括将数据存储在存储器34中,执行应用以允许用户与数据交互,显示与数据相关联的视频和/或图像内容,输出与数据相关联的音频声音等。
在示例性实施方式中,通信电路可以包括:耦合到无线电电路40的天线38。无线电电路40包括:用于经由天线38发送和接收信号的射频发射机和接收机。
无线电电路40可以被配置为在移动通信系统中运行。用于与移动无线电网络和/或广播网络交互的无线电电路40类型包括但不限于:全球移动通信系统(GSM)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用分组无线业务(GPRS)、WiFi、WiMAX、手持式数字视频广播(DVB-H)、综合业务数字广播(ISDB)、高速数据包接入(HSPA)等,以及这些标准的高级版本或任何其它适当的标准。应当理解的是,电子设备30能够使用多于一种标准进行通信。因此,天线38和无线电电路40可以表示一个或多个无线电收发器。
电子设备30可以包括主控制电路42,该主控制电路42被配置为对电子设备30的功能和操作进行总体控制。控制电路42可以包括诸如中央处理器(CPU)、微控制器或微处理器这样的处理设备44。处理设备44执行存储在控制电路34内的存储器(未示出)中的和/或在诸如存储器34这样的单独存储器中的代码,从而执行电子设备30的操作。例如,处理设备44可以执行实现活动检测功能2的代码。存储器34可以是例如缓冲器、闪速存储器、硬盘驱动器、可移动介质、易失性存储器、非易失性存储器、随机存取存储器(RAM)或其它适当设备中的一个或多个。在典型布置中,存储器34可以包括:用于长期数据存储的非易失性存储器,和用作控制电路42的系统存储器的易失性存储器。存储器34可以通过数据总线与控制电路42交换数据。还可以存在存储器34和控制电路42之间的伴随控制线和地址总线。
电子设备30还可以包括声音信号处理电路46,该声音信号处理电路46用于处理由无线电电路40发送并从无线电电路40接收到的音频信号。耦合到声音处理电路46的是扬声器48和麦克风50,扬声器48和麦克风50使得用户能够通过电子设备30收听并说话。无线电电路40和声音处理电路44均耦合到控制电路42,以便执行整体操作。音频数据可以从控制电路42传递到声音信号处理电路46,以便播放给用户。音频数据可以包括:例如来自由存储器34存储并由控制电路42检索的音频文件的音频数据,或者来自移动无线电服务的诸如呈语音通信或流式音频数据形式这样的所接收的音频数据。声音处理电路44可以包括任何适当的缓冲器、解码器、放大器等。
显示器32可以通过视频处理电路52耦合到控制电路42,该视频处理电路52将视频数据转换成用于驱动显示器32的视频信号。视频处理电路52可以包括任何适当的缓冲器、解码器、视频数据处理器等。视频数据可以由控制电路42产生,从存储在存储器34中的视频文件中检索,从由无线电电路40接收的到或通过任何其它合适方法获取的输入视频数据流导出。
电子设备30还可以包括一个或多个输入/输出(I/O)接口54。I/O接口54可以呈典型的智能手表I/O接口的形式,并且可以包括一个或多个电连接器。I/O接口54可以形成用于经由电缆将电子设备30连接到另一设备(例如,计算机)或附件(例如,个人免提(PHF)设备)的一个或多个数据端口。此外,可以通过I/O接口54接收操作电力,并且可以通过I/O接口54接收对电子设备30内的电源单元(PSU)56的电池进行充电的电力。在不存在外部电源的情况下,PSU 56可以提供电力来操作电子设备30。
电子设备30还可以包括各种其它组件。例如,系统时钟58可以对诸如控制电路42和存储器34这样的组件进行计时。可能存在用于拍摄数字图片和/或影片的摄像机60。与图片和/或影片相对应的图片和/或视频文件可以存储在存储器34中。诸如全球定位系统(GPS)接收机、伽利略卫星系统接收机等这样的位置数据接收机62可以用于确定电子设备30的位置。诸如红外收发器和/或RF收发器(例如,蓝牙芯片组)这样的本地无线接口64可以用于建立与诸如附件(例如,PHF设备)这样的邻近设备、另一移动无线电终端、计算机或其它设备的通信。
电子设备30还包括静电场传感器66。静电场传感器66检测与电子设备30有关的静电场的变化和/或电子设备30的用户。静电场传感器66可以是本领域已知的常规静电场传感器。电子设备30还可以包括诸如加速度计、陀螺仪和/或磁力计这样的运动传感器68。如本文所述,可以使用来自静电场传感器66、另一传感器68和/或麦克风50的数据,以创建用户活动的特征签名。
现移到图4,图4例示了根据本公开的、用于存储一个或多个基准签名的示例性单元。示例性存储单元被例示为具有行和列格式的简单数据库100。然而,应当理解的是,在不脱离本发明范围的情况下,可以采用用于存储多个数据的任何常规方法。
示例性数据库100(例如,存储数据流的历史记录)包括多个行102,每行对应于一个基准签名。因此,例如,第一行可以存储与骑车相对应的基准签名数据,第二行可以存储与跑步相对应的基准签名数据,第三行可以存储与步行相对应的基准签名数据,第四行可以存储与驾乘车辆相对应的基准签名数据,等等。
示例性数据库100还包括多个列104,每列对应于特定数据条目。例如,可以基于提供给签名的每个数据点的时间戳来存储基准签名数据。在这方面,时间(t)可以从0(t=0)开始,这对应于开始数据收集的时刻。然后,可以基于用于收集数据的采样周期,将相对于t=0的时间戳提供给随后的数据点,并将数据点存储在与该时间戳相对应的列中。针对每个签名存储的数据点的数量以及签名的数量仅由存储介质的硬件(例如,处理能力和物理存储器)限制。
示例性数据库可以是多维的。例如,参照图4B,数据库可以具有与静电场数据相对应的第一维度106、与加速度数据相对应的第二维度108、与声音数据相对应的第三维度,等等。第一维度、第二维度和第三维度可以基于时间相互关联。
在一实施方式中,数据库100存储在电子设备30内,例如在存储器34或电子设备的其它存储器内。在另一实施方式中,远离电子设备30存储数据库100。例如,数据库100可以存储在可由电子设备30经由网络连接或其它通信接口访问的服务器(未示出)或其它存储设备中。通信接口可以包括有线和/或无线技术。在又一实施方式中,数据库可以驻留在电子设备30上,并且当网络访问可用时卸载到服务器。
虽然已示出并描述了特定实施方式,但是应当理解的是,在阅读并理解本说明书时,本领域技术人员能够想到落入所附权利要求范围内的等同物和修改。

Claims (20)

1.一种电子设备,所述电子设备包括:
静电场传感器,所述静电场传感器用于检测静电场;
至少一个其它传感器,所述至少一个其他传感器用于检测运动或声音中的一个;以及
控制电路,所述控制电路操作用于确定由用户执行的活动,所述控制电路被配置为进行如下操作:
从所述静电场传感器数据获取第一数据,所述第一数据对应于与所述电子设备有关的静电场;
从所述至少一个其它传感器数据获取第二数据,所述第二数据对应于所述电子设备的运动;
从所述第一数据和所述第二数据形成特征签名;以及
基于所述特征签名与多个基准签名的比较,来识别用户活动,其中每个bas。
2.根据权利要求1所述的电子设备,所述电子设备还包括用于存储所述多个基准签名的数据库。
3.根据权利要求2所述的电子设备,其中,所述数据库包括多个基准签名,所述多个基准签名中的至少一个基准签名至少部分对应于与所述用户有关的静电场。
4.根据权利要求2-3中任一项所述的电子设备,其中,所述数据库包括多个基准签名,所述多个基准签名中的至少一个基准签名至少部分对应于车辆点火系统的打火。
5.根据权利要求2-4中任一项所述的电子设备,其中,所述数据库包括多个基准签名,所述多个基准签名中的至少一个基准签名至少部分对应于电源的电频率。
6.根据权利要求5所述的电子设备,其中,至少部分地对应于电源的所述电频率的所述多个基准签名的所述至少一个基准签名包括:与以50或60Hz工作的A/C电源相对应的基准签名。
7.根据权利要求1-6中任一项所述的电子设备,其中,所述多个基准签名中的至少一个基准签名对应于如下各项中的至少一个:步行、跑步、骑车、乘坐机动车辆、或乘坐飞机。
8.根据权利要求1-7中任一项所述的电子设备,其中,所述至少一个其它传感器包括如下各项中的至少一个:加速度计、陀螺仪或磁力计。
9.根据权利要求1-8中任一项所述的电子设备,所述电子设备还包括声音捕捉设备,其中,所述控制电路还被配置为进行如下操作:
从所述声音捕捉设备获取第三数据,所述第三数据对应于所述电子设备的环境中的声音;以及
从所述第一数据、所述第二数据和第三数据形成所述特征签名。
10.根据权利要求9所述的电子设备,其中,所述数据库包括多个基准签名,所述多个基准签名中的至少一个基准签名至少部分地对应于:通过踩自行车踏板而产生的声音,或飞行器机舱内的声音。
11.一种确定用户活动的方法,所述方法包括如下步骤:
限定多个基准签名,每个基准签名对应于用户活动的类型,并且包括从代表变化的静电场的第一数据和代表运动的第二数据形成的数据;
从第一传感器获取响应于变化的静电场的数据;
从第二传感器获取响应于运动的数据;
从所述第一数据和所述第二数据的组合形成特征签名;以及
基于所述特征签名与所述多个基准签名的比较,来识别所述用户活动。
12.根据权利要求11所述的方法,其中,所述第一数据对应于与所述用户有关的静电场。
13.根据权利要求11-12中任一项所述的方法,其中,所述第一数据对应于车辆点火系统的打火。
14.根据权利要求11-13中任一项所述的方法,其中,所述第一数据对应于电源的电频率。
15.根据权利要求14所述的方法,其中,所述电源是以50或60Hz工作的A/C电源。
16.根据权利要求11-15中任一项所述的方法,其中,从所述第一传感器获取的步骤包括:使用电场传感器作为所述第一传感器。
17.根据权利要求11-16中任一项所述的方法,其中,从所述第二传感器获取的步骤包括:使用加速度计、陀螺仪或磁力计中的至少一个作为所述第二传感器。
18.根据权利要求11-17中任一项所述的方法,其中,所述活动包括如下各项中的至少一个:步行、跑步、骑车、乘坐机动车辆、或乘坐飞机。
19.根据权利要求11-18中任一项所述的方法,所述方法还包括如下步骤:
还从声音数据形成每个基准签名;
从第三传感器获取环境声音数据;以及
将所述第一数据及所述第二数据与所述第三数据组合。
20.根据权利要求19所述的方法,其中,所述声音数据是如下各项中的至少一个的特征:通过踩自行车踏板而产生的声音,或飞行器机舱内的声音。
CN201680021642.7A 2015-04-14 2016-01-07 确定用户活动的设备和方法 Active CN107532922B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/685,710 2015-04-14
US14/685,710 US10605595B2 (en) 2015-04-14 2015-04-14 Biking activity recognition through combination of electric field sensing and accelerometer
PCT/IB2016/050074 WO2016166613A1 (en) 2015-04-14 2016-01-07 Biking activity recognition through combination of electric field sensing and accelerometer

Publications (2)

Publication Number Publication Date
CN107532922A true CN107532922A (zh) 2018-01-02
CN107532922B CN107532922B (zh) 2021-01-12

Family

ID=55300731

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680021642.7A Active CN107532922B (zh) 2015-04-14 2016-01-07 确定用户活动的设备和方法

Country Status (4)

Country Link
US (1) US10605595B2 (zh)
EP (1) EP3283851A1 (zh)
CN (1) CN107532922B (zh)
WO (1) WO2016166613A1 (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10531977B2 (en) 2014-04-17 2020-01-14 Coloplast A/S Thermoresponsive skin barrier appliances
WO2019120444A1 (en) 2017-12-22 2019-06-27 Coloplast A/S A monitor device of an ostomy system having a connector for coupling to both a base plate and an accessory device
LT3727227T (lt) 2017-12-22 2023-07-25 Coloplast A/S Ostomijos prietaiso pagrindo plokštė ir pagrindo plokštės jutiklių montavimo dalis ir pagrindo plokštės ir jutiklių montavimo dalies gamybos būdas
US10799385B2 (en) 2017-12-22 2020-10-13 Coloplast A/S Ostomy appliance with layered base plate
WO2019120442A1 (en) 2017-12-22 2019-06-27 Coloplast A/S Sensor assembly part and a base plate for an ostomy appliance and a device for connecting to a base plate or a sensor assembly part
EP3727234B1 (en) 2017-12-22 2022-01-26 Coloplast A/S Ostomy appliance with angular leakage detection
EP3727239B1 (en) 2017-12-22 2024-02-07 Coloplast A/S Base plate for an ostomy appliance, a monitor device and a system for an ostomy appliance
US11622719B2 (en) 2017-12-22 2023-04-11 Coloplast A/S Sensor assembly part, base plate and monitor device of a medical system and associated method
US11534323B2 (en) 2017-12-22 2022-12-27 Coloplast A/S Tools and methods for placing a medical appliance on a user
EP3727222B1 (en) 2017-12-22 2024-05-08 Coloplast A/S Sensor assembly part for an ostomy appliance and a method for manufacturing a sensor assembly part
WO2019120429A1 (en) 2017-12-22 2019-06-27 Coloplast A/S Data collection schemes for an ostomy appliance and related methods
EP4042985A1 (en) 2017-12-22 2022-08-17 Coloplast A/S Processing schemes for an ostomy system, monitor device for an ostomy appliance and related methods
US10849781B2 (en) 2017-12-22 2020-12-01 Coloplast A/S Base plate for an ostomy appliance
US11590015B2 (en) 2017-12-22 2023-02-28 Coloplast A/S Sensor assembly part and a base plate for a medical appliance and a method for manufacturing a sensor assembly part and a base plate
US11627891B2 (en) 2017-12-22 2023-04-18 Coloplast A/S Calibration methods for medical appliance tools
DK3727219T3 (da) 2017-12-22 2023-10-30 Coloplast As Fugtdetekterende basisplade til en stomianordning og system til bestemmelse af fugtspredning i en basisplade og/eller en sensormonteringsdel
KR102687604B1 (ko) 2017-12-22 2024-07-24 컬러플라스트 에이/에스 선택적인 센서 지점을 갖춘 누설치술 기기 및 관련 방법
CN111465373B (zh) 2017-12-22 2022-07-08 科洛普拉斯特公司 造口术系统和具有角形泄漏检测的监测装置
WO2019120445A1 (en) 2017-12-22 2019-06-27 Coloplast A/S Base plate and sensor assembly of an ostomy system having a leakage sensor
CN111465372B (zh) 2017-12-22 2022-09-06 科洛普拉斯特公司 用于造口术底板和传感器组件部的具有铰链的联接部
US10500084B2 (en) 2017-12-22 2019-12-10 Coloplast A/S Accessory devices of an ostomy system, and related methods for communicating leakage state
WO2019120425A1 (en) 2017-12-22 2019-06-27 Coloplast A/S Ostomy appliance system, monitor device, and method of monitoring an ostomy appliance
US11654043B2 (en) 2017-12-22 2023-05-23 Coloplast A/S Sensor assembly part and a base plate for a medical appliance and a method for manufacturing a base plate or a sensor assembly part
US11998473B2 (en) 2017-12-22 2024-06-04 Coloplast A/S Tools and methods for cutting holes in a medical appliance
EP3755282B1 (en) 2018-02-20 2024-05-08 Coloplast A/S Sensor assembly part and a base plate for an ostomy appliance and a device for connecting to a base plate and/or a sensor assembly part
US12029582B2 (en) 2018-02-20 2024-07-09 Coloplast A/S Accessory devices of a medical system, and related methods for changing a medical appliance based on future operating state
LT3764961T (lt) 2018-03-15 2024-03-25 Coloplast A/S Aparatas ir būdai ostomijos prietaiso vartotojo navigacijai į persisirengimo kambarį
JP7402169B2 (ja) * 2018-03-15 2023-12-20 コロプラスト アクティーゼルスカブ センサデータに基づいてオストミー装具の装着時間を判断する装置及び方法
WO2019174692A1 (en) * 2018-03-15 2019-09-19 Coloplast A/S Apparatus and methods for determining ostomy appliance wear time based on location data
CN113194891A (zh) 2018-12-20 2021-07-30 科洛普拉斯特公司 利用图像数据变换进行造口术状况分类的装置和相关方法
US11612512B2 (en) 2019-01-31 2023-03-28 Coloplast A/S Moisture detecting base plate for an ostomy appliance and a system for determining moisture propagation in a base plate and/or a sensor assembly part
US11593735B2 (en) 2019-05-21 2023-02-28 International Business Machines Corporation Automated and efficient personal transportation vehicle sharing
US20230071636A1 (en) * 2021-08-27 2023-03-09 Stmicroelectronics S.R.L. Enhanced human activity recognition
US20230075382A1 (en) * 2021-08-27 2023-03-09 Stmicroelectronics S.R.L. Enhanced human activity recognition

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1610519A (zh) * 2002-09-19 2005-04-27 松下电器产业株式会社 身体运动评价装置及身体运动评价系统
US20070100666A1 (en) * 2002-08-22 2007-05-03 Stivoric John M Devices and systems for contextual and physiological-based detection, monitoring, reporting, entertainment, and control of other devices
CN104173062A (zh) * 2014-09-11 2014-12-03 青岛永通电梯工程有限公司 一种应用于智能手机的健康监控方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070100666A1 (en) * 2002-08-22 2007-05-03 Stivoric John M Devices and systems for contextual and physiological-based detection, monitoring, reporting, entertainment, and control of other devices
CN1610519A (zh) * 2002-09-19 2005-04-27 松下电器产业株式会社 身体运动评价装置及身体运动评价系统
CN104173062A (zh) * 2014-09-11 2014-12-03 青岛永通电梯工程有限公司 一种应用于智能手机的健康监控方法

Also Published As

Publication number Publication date
CN107532922B (zh) 2021-01-12
EP3283851A1 (en) 2018-02-21
US10605595B2 (en) 2020-03-31
WO2016166613A1 (en) 2016-10-20
US20160305776A1 (en) 2016-10-20

Similar Documents

Publication Publication Date Title
CN107532922A (zh) 通过电场感测和加速度计的组合的骑车活动识别
CN103460221B (zh) 用于在移动装置中使用似然函数值的组合对用户活动进行分类的系统、方法和设备
CN104123937B (zh) 提醒设置方法、装置和系统
CN108076218B (zh) 一种充电提醒方法及移动终端
CN110495819B (zh) 机器人的控制方法、机器人、终端、服务器及控制系统
CN103578474B (zh) 一种语音控制方法、装置和设备
US9726498B2 (en) Combining monitoring sensor measurements and system signals to determine device context
CN109556621B (zh) 一种路线规划的方法及相关设备
US11182065B2 (en) Method and apparatus for pushing information
US11274932B2 (en) Navigation method, navigation device, and storage medium
CN107967339B (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
US10989559B2 (en) Methods, systems, and devices for displaying maps
CN111225110A (zh) 推荐应用或者内容的移动通信终端和方法
CN106383628B (zh) 一种锁屏图片显示的方法及终端
CN106705989B (zh) 记步方法、设备及终端
CN107205088A (zh) 拍照控制方法及相关产品
CN109409235B (zh) 图像识别方法和装置、电子设备、计算机可读存储介质
CN113076771A (zh) 一种车辆及其车辆管理系统、监测方法
CN108151716A (zh) 飞行装置测绘作业区域规划方法、装置和终端
CN111177137A (zh) 数据去重的方法、装置、设备及存储介质
CN109917988B (zh) 选中内容显示方法、装置、终端及计算机可读存储介质
CN109408659A (zh) 基于小世界网络的图像检索方法、装置、计算设备及介质
CN111611414B (zh) 车辆检索方法、装置及存储介质
Ball et al. Battery patterns and forecasting in a large-scale smartphone-based travel survey
CN110381341B (zh) 一种数据处理方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant