CN110197725A - 一种基于智能移动终端对指动作检测的手指灵活度测试方法 - Google Patents

一种基于智能移动终端对指动作检测的手指灵活度测试方法 Download PDF

Info

Publication number
CN110197725A
CN110197725A CN201910436590.5A CN201910436590A CN110197725A CN 110197725 A CN110197725 A CN 110197725A CN 201910436590 A CN201910436590 A CN 201910436590A CN 110197725 A CN110197725 A CN 110197725A
Authority
CN
China
Prior art keywords
finger
mobile terminal
intelligent mobile
user
test method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910436590.5A
Other languages
English (en)
Inventor
滕飞
徐文渊
冀晓宇
程雨诗
林子义
郭源霖
孟羽童
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN201910436590.5A priority Critical patent/CN110197725A/zh
Publication of CN110197725A publication Critical patent/CN110197725A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Data Mining & Analysis (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Epidemiology (AREA)
  • Biomedical Technology (AREA)
  • Primary Health Care (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种基于智能移动终端对指动作检测的手指灵活度测试方法。该方法基于具有触敏显示器的设备实现，所述设备可以记录用户在触敏显示器上执行的手势的运动数据。根据用户手指滑动速度，将该数据与健康人平均滑动速度进行对比，从而检测判定当前用户的手指灵活度水平。本发明基于智能移动终端，能够实现便捷、准确的检测用户手指的灵活度。本发明可在不同平台、设备上应用，具有极高的适用性与推广前景。

Description

一种基于智能移动终端对指动作检测的手指灵活度测试方法
技术领域
本发明涉及医疗健康领域，涉及一种基于智能移动终端对指动作检测的手指灵活度测试方法，尤其涉及了使用了触敏显示器的用户交互数据记录。
背景技术
在医疗健康领域中，手指灵活度检测被广泛应用于帕金森病检测等领域。但在临床诊断过程中，医疗工作者往往使用肉眼观察患者的手指灵活度。这一过程需要丰富的诊断经验，且不可避免地会出现主观上的误差与误判。利用智能移动终端进行更为精准的检测，有着定量分析的优势与实用价值。
随着科技的进步，社会的发展，人类的生命健康越来越被重视。其中，帕金森病(PD)是临床上第二常见的神经退行性疾病，随着全球老龄化的加速，PD的患病率也逐年提高，流行病学研究发现65岁人群中，PD的患病率约为1.7％，全球范围内其影响超过700万人，据统计，到2050年，全球PD病人中，将有50％的在中国，给整个中国社会造成巨大的压力。但是，现有检测产品大多功能复杂、成本高昂，需要较多的医疗资源支持。由于帕金森病的早期症状如颤抖、走路不稳、动作缓慢僵硬、少言寡语等，常被误认为是老年人的正常现象，从而造成帕金森病患者的就诊率非常低，经常出现漏诊现象。本发明提供一种全新的方法可降低检测成本，简化检测手段，提高人群帕金森病前期检测的比例，降低漏诊率。
发明内容
本发明的目的在于针对现有技术的不足，提供一种基于智能移动终端对指动作检测的手指灵活度测试方法，该方法可检测用户的手指灵活度，可应用于如帕金森等疾病的前期检测中。
本发明采用的技术方案如下：
一种基于智能移动终端对指动作检测的帕金森病手指灵活度测试方法，该方法基于具有触敏显示器的智能移动终端实现，所述方法包括：
在所述触敏显示器上显示一对虚拟滑块图像，其中所述滑块图像中的每一个滑块图像为是图形交互式用户界面对象，用户于与所述图形交互式用户界面对象进行如下交互：用对指动作将两个虚拟滑块滑动至预设位置，智能移动终端将以记录用户手指滑动速度，将用户的手指滑动速度将与预设的健康人手指滑动平均速度对比，检测该用户的手指灵活度水平。
上述技术方案中，进一步的，所述的滑动至预设位置中的滑动可沿任意路径进行。
进一步的，在触敏显示屏上还显示有两个虚拟滑块经对指动作滑动至预设位置的预设滑动通道。
进一步的，在触敏显示屏上还显示有滑动方向提示以传达所述滑块图像所需的移动方向。
进一步的，所述的滑动方向提示包括文本。
进一步的，所述的滑动方向提示包括所需移动大体方向的箭头。
本发明的有益效果是：
本发明基于智能移动终端能够实现便捷、准确的检测用户手指的灵活度。该方法可以在不同平台、设备上应用，具有极高的适用性与推广前景。可以应用于帕金森等疾病的早期筛查。
附图说明
附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1是根据本发明某些实施例而将设备转换到用户界面运行状态的过程的流程图。
图2是根据本发明某些实施例，处于用户界面运行状态的设备的GUI显示。圆点表示为用户与触敏屏的接触点。
图3是根据本发明某些实施例，处于用户界面并正确移动虚拟滑块图像的设备的GUI显示。圆点表示为用户与触敏屏的接触点。箭头代表不局限于箭头形式的文字、形状类提示信息。
图4是根据本发明某些实施例，处于用户界面并错误移动虚拟滑块图像的设备的GUI显示。圆点表示为用户与触敏屏的接触点。箭头代表不局限于箭头形式的文字、形状类提示信息。
图5是根据本发明某些实施例，处于用户界面并正在移动虚拟滑块图像的设备的GUI显示与用户较为真实的操作行为图示。圆点表示为用户与触敏屏的接触点。箭头代表不局限于箭头形式的文字、形状类提示信息。用户使用了大拇指与食指对指的行为，但此图代表不局限于该对指形式的同类对指运动状态以及用户与触敏屏交互的接触状态。
图6是根据本发明某些实施例，用户较为真实的操作行为图示。箭头代表用户手指与触敏屏接触点的移动方向。虚线圆代表对指行为完成的预计位置。用户使用了大拇指与食指对指的行为，但此图代表不局限于该对指形式的同类对指运动状态以及用户与触敏屏交互的接触状态。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细描述。应当理解，此处所描述的具体实施例仅仅用于解释本发明，并不用于限定本发明。
相反，本发明涵盖任何由权利要求定义的在本发明的精髓和范围上做的替代、修改、等效方法以及方案。进一步，为了使公众对本发明有更好的了解，在下文对本发明的细节描述中，详尽描述了一些特定的细节部分。对本领域技术人员来说没有这些细节部分的描述也可以完全理解本发明。
本发明的一种具体实施例的方法流程和具体实现如图1-4所示：
在智能移动终端的触敏显示器上显示一对虚拟滑块图像，其中所述滑块图像中的每一个滑块图像为是图形交互式用户界面对象，用户与图形交互式用户界面对象进行交互。同时智能移动终端压力传感器采集交互数据；
对采集到的压力传感器数据提取x轴相对起始位置，x轴相对终止位置，y轴相对起始位置，y轴相对终止位置，起始点到终止点的直线距离，整个滑动轨迹的长度，单次运动时间等信息；可以获得：
滑动的平均速度为：
其中sstart表示开始与屏幕接触时指尖与屏幕的接触面积，tstart，tstop分别表示一次滑动中手指与屏幕开始、结束接触的时间；
滑动过程中最大紧邻两点的速度为：
其中ti表示第i个接触点的时间；n代表一次滑动中采集的接触点总个数，xi和yi表示第i个接触点的x轴、y轴位置；
本发明方法主要关注的触敏屏交互手势为——对指，在用户日常使用智能移动终端时，经常会使用该手势或反向手势进行图片的放缩。
而根据帕金森病的病症特征之一——运动迟缓的判断，本发明通过检测用户滑动虚拟滑块图像的速度与动作特点等信息，并将采集数据与健康人数据进行对比，进行运动迟缓特征的识别，可以测试出用户手指灵活度水平，从而可以一定程度上进行帕金森病的前期检测。
在某些实施例中，在触敏显示屏上还显示有预设位置以及两个虚拟滑块经对指动作滑动至预设位置的预设滑动通道。当设备处于所述用户界面运行状态时，检测与触敏显示器的接触；根据所述接触来移动设备的用户界面中的虚拟滑块图像；如果检测到的接触对应于预定手势，则将设备转换到移动完成状态，并记录此次移动的运动数据；如果检测到的接触不对应于预定手势，则将设备保持在用户界面运行状态，并将虚拟滑块图像恢复至第一预定位置。
在某些实施例中，当设备处于用户界面运行状态时，在触敏显示器上显示虚拟滑块图像；检测与触敏显示器的接触；如果检测到的移动不符合预设方向，则立即显示预设方向提示。并记录此次移动所产生的交互数据，将错误信息提示展示在所述触敏显示器的用户界面上。
在某些实施例中，当设备处于用户界面运行状态时，在触敏显示器上显示虚拟滑块图像；检测与触敏显示器的接触；如果检测到的移动符合预设方向，则在用户完成移动过程后，立即显示移动成功提示。并记录此次移动所产生的交互数据，将部分信息展示在所述触敏显示器的用户界面上。
本发明实施例的实际操作情况，如图5、图6所示。用户同时将手指(图例为大拇指与食指)放置于虚拟滑块图像之上，并拖动滑块进行相向运动，运动至预设区域后，程序将记录该次数据并提示成功。
上述方法可以由智能移动终端执行，其中所述智能移动终端具有：带有图形用户界面(GUI)的触敏显示器，一个或多个处理器，存储器，以及一个或多个保存在存储器中以执行这些方法的模块、程序或指令集。在某些实施例中，所述便携式电子设备提供了包括无线通信在内的多种功能。用于执行上述方法的指令可以包括在被配置为由一个或多个处理器执行的计算机程序产品中。

Claims (6)

1.一种基于智能移动终端对指动作检测的手指灵活度测试方法，其特征在于，该方法基于具有触敏显示器的智能移动终端实现，所述方法包括：
在所述触敏显示器上显示一对虚拟滑块图像，其中所述滑块图像为图形交互式用户界面对象，用户与所述图形交互式用户界面对象进行如下交互：用对指动作将两个虚拟滑块滑动至预设位置，智能移动终端将记录用户手指滑动速度，将用户的手指滑动速度将与预设的健康人手指滑动平均速度对比，检测该用户的手指灵活度水平。
2.根据权利要求1所述的基于智能移动终端对指动作检测的手指灵活度测试方法，其特征在于，所述的滑动至预设位置中的滑动可沿任意路径进行。
3.根据权利要求1所述的基于智能移动终端对指动作检测的手指灵活度测试方法，其特征在于，在触敏显示屏上还显示有两个虚拟滑块经对指动作滑动至预设位置的预设滑动通道。
4.根据权利要求1所述的基于智能移动终端对指动作检测的手指灵活度测试方法，其特征在于，在触敏显示屏上还显示有滑动方向提示以传达所述滑块图像所需的移动方向。
5.根据权利要求4所述的基于智能移动终端对指动作检测的手指灵活度测试方法，其特征在于，所述的滑动方向提示包括文本。
6.根据权利要求4所述的基于智能移动终端对指动作检测的手指灵活度测试方法，其特征在于，所述的滑动方向提示包括所需移动大体方向的箭头。
CN201910436590.5A 2019-05-23 2019-05-23 一种基于智能移动终端对指动作检测的手指灵活度测试方法 Pending CN110197725A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910436590.5A CN110197725A (zh) 2019-05-23 2019-05-23 一种基于智能移动终端对指动作检测的手指灵活度测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910436590.5A CN110197725A (zh) 2019-05-23 2019-05-23 一种基于智能移动终端对指动作检测的手指灵活度测试方法

Publications (1)

Publication Number Publication Date
CN110197725A true CN110197725A (zh) 2019-09-03

Family

ID=67751628

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910436590.5A Pending CN110197725A (zh) 2019-05-23 2019-05-23 一种基于智能移动终端对指动作检测的手指灵活度测试方法

Country Status (1)

Country Link
CN (1) CN110197725A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111210912A (zh) * 2020-01-14 2020-05-29 上海恩睦信息科技有限公司 一种帕金森预测方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102474560A (zh) * 2009-07-17 2012-05-23 索尼爱立信移动通讯有限公司 由电子装置使用触敏显示器控制数字图像的放大和采集
CN102830933A (zh) * 2008-03-04 2012-12-19 苹果公司 使用手势选择文本
CN104750275A (zh) * 2013-12-25 2015-07-01 华为技术有限公司 一种滑块的移动速度的确定方法及装置
US9335900B2 (en) * 2007-05-30 2016-05-10 Microsoft Technology Licensing, Llc Recognizing selection regions from multiple simultaneous input
CN105975187A (zh) * 2016-04-27 2016-09-28 上海斐讯数据通信技术有限公司 一种基于移动终端的锻炼评估方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9335900B2 (en) * 2007-05-30 2016-05-10 Microsoft Technology Licensing, Llc Recognizing selection regions from multiple simultaneous input
CN102830933A (zh) * 2008-03-04 2012-12-19 苹果公司 使用手势选择文本
CN102474560A (zh) * 2009-07-17 2012-05-23 索尼爱立信移动通讯有限公司 由电子装置使用触敏显示器控制数字图像的放大和采集
CN104750275A (zh) * 2013-12-25 2015-07-01 华为技术有限公司 一种滑块的移动速度的确定方法及装置
CN105975187A (zh) * 2016-04-27 2016-09-28 上海斐讯数据通信技术有限公司 一种基于移动终端的锻炼评估方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
孙怡宁等: ""帕金森病患者手指开合动作规律性的量化评估"", 《生物医学工程学杂志》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111210912A (zh) * 2020-01-14 2020-05-29 上海恩睦信息科技有限公司 一种帕金森预测方法及装置

Similar Documents

Publication Publication Date Title
US11948401B2 (en) AI-based physical function assessment system
Guo et al. Vision-based finger tapping test in patients with Parkinson’s disease via spatial-temporal 3D hand pose estimation
CN102509088A (zh) 一种手部运动检测的方法、装置及人机交互系统
TW201007508A (en) Real-time motion recognition method and inertia sensing and trajectory
CN106814854A (zh) 一种防止误操作的方法及装置
CN102920451B (zh) 以多点触摸的方式测量心电图的方法
TW201840293A (zh) 用於改善生理檢測之可用性及精確度的方法
Streli et al. Capcontact: Super-resolution contact areas from capacitive touchscreens
CN111012312B (zh) 一种便携式帕金森病运动迟缓监测干预装置及方法
CN110197725A (zh) 一种基于智能移动终端对指动作检测的手指灵活度测试方法
CN107045393A (zh) 基于数字笔的连线测试多通道数据采集方法及系统
CN117322842A (zh) 一种基于移动终端的行动障碍评估方法及装置
US20230367398A1 (en) Leveraging machine learning and fractal analysis for classifying motion
CN103854026B (zh) 一种识别方法及电子设备
CN105046429B (zh) 基于手机传感器的交互过程中用户思维工作负荷评估方法
CN109643190A (zh) 便携式电子设备的扩展交互
Fairhurst et al. Developing a generic approach to online automated analysis of writing and drawing tests in clinical patient profiling
Bottos et al. An approach to track reading progression using eye-gaze fixation points
Guo et al. Understanding mobile reading via camera based gaze tracking and kinematic touch modeling
Murthy et al. Assessing blood-pressure measurement in tablet-based mHealth apps
US20230047530A1 (en) Method and device for analyzing fine motor skills
CN109358799A (zh) 在手写设备上添加用户输入的手写批注信息的方法
CN109717831A (zh) 一种基于触控手势的非干扰式神经系统疾病辅助检测系统
Carrino et al. Gesture segmentation and recognition with an EMG-based intimate approach-an accuracy and usability study
Shen et al. The impact of quantity of training data on recognition of eating gestures

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190903