CN109300123A - 基于面部和舌部图像采集的体质分析方法 - Google Patents

基于面部和舌部图像采集的体质分析方法 Download PDF

Info

Publication number
CN109300123A
CN109300123A CN201811087350.0A CN201811087350A CN109300123A CN 109300123 A CN109300123 A CN 109300123A CN 201811087350 A CN201811087350 A CN 201811087350A CN 109300123 A CN109300123 A CN 109300123A
Authority
CN
China
Prior art keywords
tongue
image
face
patient
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811087350.0A
Other languages
English (en)
Inventor
秦黎明
章青
陈鹏
高原
黄磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN201811087350.0A priority Critical patent/CN109300123A/zh
Publication of CN109300123A publication Critical patent/CN109300123A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/12Edge-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/149Segmentation; Edge detection involving deformable models, e.g. active contour models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details
    • G06T2207/20116Active contour; Active surface; Snakes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

本发明公开了基于面部和舌部图像采集的体质分析方法,包括以下步骤:医生进行病患用户个人信息的初始录入,并为病患用户建立个人电子病历存档;在标准照明环境条件下,采集患者面部和舌部图像,然后对采集到的图像进行预处理;将采集到的面部图像进行人脸面部轮廓区域分割以提取五脏特征区域的颜色和光泽信息,然后再进行正面舌部图像的舌体区域分割,提取舌体的舌质和舌苔信息;基于YCbCr颜色空间对上述划分的五脏特征区域的颜色和光泽进行分析,然后对舌体的舌质和舌苔信息进行分析,综合得到体质检测的结果;生成体质分析报告并存档。本方法可以提高医生体质诊断的效率。

Description

基于面部和舌部图像采集的体质分析方法
技术领域
本发明涉及一种体质分析的系统和方法,尤其涉及基于舌面图像采集并结合中医体质理论的体质检测分析方法。
背景技术
中医在长期的医疗实践中,总结出了望闻问切四种诊断疾病的方法,其中望诊就是观察病人全身或局部的神、色、形、态的变化,位居四诊之首,而面诊和舌诊因反应内脏病变较为准确,成为望诊中最重要的两项传统疗法。在中医理论中,体质是指人类在生长、发育过程中所形成的与自然、社会环境相适应的人体个性特征。中医体质分为平和质、气虚质、阳虚质、阴虚质、痰湿质、湿热质、血瘀质、气郁质、特禀质九个类型。通过对体质的诊断,可以贯彻中医学“治未病”的思想,结合体质进行预防,通过改善体质来调整身体的功能状态。
但是传统的面诊方法主要是通过医生目测观察患者的面色并结合临床经验来实现的,诊断结果一方面受到医生的思维能力和临床诊断技能等主观因素的影响,另一方面还受到光线、温度、天气等外部环境因素的干扰。由于缺乏客观化的评价体系,中医在现代社会中的弘扬与发展受到了一定的阻碍。
发明内容
本发明的目的在于克服已有技术的不足,提供一种能够将面诊客观化和舌诊客观化结合起来提高医生体质诊断效率的基于面部和舌部图像采集的体质分析方法。
为解决上述问题,本发明采用的技术方案是:
基于面部和舌部图像采集的体质分析方法,包括如下步骤:
步骤一、医生通过与患者交流,通过用户信息子模块进行病患用户个人信息的初始录入,并为病患用户建立个人电子病历存档;
步骤二、通过光源系统营造标准照明环境条件,使用计算机操控数码相机采集患者面部图像和舌部图像,然后对采集的患者面部图像和舌部图像进行预处理;
所述的患者面部图像包括患者正面面部图像和左右两侧面角度的面部图像,所述的舌部图像为患者正面舌部图像;
步骤三、将上述采集到的面部图像进行人脸面部轮廓区域分割以提取五脏特征区域的颜色和光泽信息,然后再进行正面舌部图像的舌体区域分割,提取舌体的舌质和舌苔信息;
其中人脸面部轮廓区域分割步骤为:
(a)通过基于肤色的Adaboost算法实现人脸面部轮廓的提取,排除无关因素的影响;
(b)对提取的人脸面部轮廓进行灰度处理,然后根据灰度变化确定双眼的位置;
(c)根据定位的人眼位置,基于先验知识确定五脏分别对应的面部特征区域,并分别进行额心、双颧、鼻尖和下颏五块特征区域的划分;
所述的舌体区域分割步骤为:通过基于Snakes模型实现对舌体部分的分割,将舌体部分提取出来;
步骤四、基于YCbCr颜色空间对上述划分的五脏特征区域的颜色和光泽进行分析,并排除我国正常人的常色特点的影响,结合中医“五色诊”理论分析患者面部特征区域青、赤、黄、白、黑五色的变化,分析五脏特征区域的颜色和光泽信息;然后对舌体的舌质和舌苔信息进行分析,并与数据库中正常舌象分析比对,寻找出其中的变化,最后图像分析处理模块综合面色分析和舌象分析的结果,得到体质检测的结果;
步骤五、将患者的个人信息、采集图像、体质检测结果、对应体质养生计划集中生成到同一文档中,医生基于专业知识、诊断经验以及与患者之间的交流沟通,对体质分析报告进行适当的修改并打印提供给用户,同时电子存档。
与现有技术相比,本发明具有以下有益效果:
本发明结合中医望诊理论和中医体质理论对患者用户的面色和舌象进行客观化分析,给出用户的体质检测结果,可以为现阶段中医医生除了自主诊断之外提供更多的检测方式,两者相结合可以获得更为准确的诊断结果。通过本发明,可以更方便快捷地对用户进行体制检测,获知个人的体质情况,本发明给出的养生计划也有利于用户身体状态的改善。
附图说明
图1是本发明的基于面部和舌部图像采集的体质分析方法工作流程图。
具体实施方式
下面结合附图和具体实施例对本发明进行进一步的详细描述:
如图1所示,本发明的基于面部和舌部图像采集的体质分析方法,包括如下步骤:
步骤一、医生通过与患者交流,通过用户信息子模块进行病患用户个人信息(包括姓名、年龄、性别、就诊时间等)的初始录入,并为病患用户建立个人电子病历存档;
步骤二、通过光源系统营造标准(根据ISO3664:2000,在我国大部分地区,标准照明环境条件大致等同为晴天上午9时的自然光光照)照明环境条件,使用计算机操控数码相机采集患者面部图像和舌部图像,然后对采集的患者面部图像和舌部图像进行预处理以方便后期对采集图像的处理;
所述的患者面部图像包括患者正面面部图像和左右两侧面角度的面部图像,所述的舌部图像为患者正面舌部图像;
所述的预处理包括裁剪、缩放等。
步骤三、将上述采集到的面部图像进行人脸面部轮廓区域分割以提取五脏特征区域的颜色和光泽信息,然后再进行正面舌部图像的舌体区域分割,提取舌体的舌质和舌苔信息;
其中人脸面部轮廓区域分割步骤为:
(a)通过基于肤色的Adaboost算法实现人脸面部轮廓的提取,排除头发等无关因素的影响;
(b)对提取的人脸面部轮廓进行灰度处理,然后根据灰度变化确定双眼的位置,方便之后五脏特征点的提取;
(c)根据定位的人眼位置,基于先验知识(中医理论上有五脏与面部区域的大致对应关系)确定五脏(心、肝、脾、肺、肾)分别对应的面部特征区域,并分别进行额心、双颧(双颧指两个颧骨)、鼻尖和下颏五块特征区域的划分;
所述的舌体区域分割步骤为:通过基于Snakes模型实现对舌体部分的分割,将舌体部分(采集舌部图像的时候会采集到唇部及附近的面部区域)提取出来,方便之后的分析处理。
步骤四、基于YCbCr颜色空间对上述划分的五脏特征区域的颜色和光泽进行分析,并排除我国正常人的常色特点是红黄隐隐,明润含蓄的影响,结合中医“五色诊”理论分析患者面部特征区域青、赤、黄、白、黑五色的变化,分析五脏特征区域的颜色和光泽信息;然后对舌体的舌质和舌苔信息进行分析,并与数据库中正常舌象分析比对,寻找出其中的变化,最后图像分析处理模块综合面色分析和舌象分析的结果,得到体质检测的结果;
步骤五、将患者的个人信息、采集图像、体质检测结果、对应体质养生计划集中生成到同一文档中,医生基于专业知识、诊断经验以及与患者之间的交流沟通,对体质分析报告进行适当的修改并打印提供给用户,同时电子存档。
最后应当说明的是,以上所述仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。

Claims (1)

1.基于面部和舌部图像采集的体质分析方法,其特征在于包括如下步骤:
步骤一、医生通过与患者交流,通过用户信息子模块进行病患用户个人信息的初始录入,并为病患用户建立个人电子病历存档;
步骤二、通过光源系统营造标准照明环境条件,使用计算机操控数码相机采集患者面部图像和舌部图像,然后对采集的患者面部图像和舌部图像进行预处理;
所述的患者面部图像包括患者正面面部图像和左右两侧面角度的面部图像,所述的舌部图像为患者正面舌部图像;
步骤三、将上述采集到的面部图像进行人脸面部轮廓区域分割以提取五脏特征区域的颜色和光泽信息,然后再进行正面舌部图像的舌体区域分割,提取舌体的舌质和舌苔信息;
其中人脸面部轮廓区域分割步骤为:
(a)通过基于肤色的Adaboost算法实现人脸面部轮廓的提取,排除无关因素的影响;
(b)对提取的人脸面部轮廓进行灰度处理,然后根据灰度变化确定双眼的位置;
(c)根据定位的人眼位置,基于先验知识确定五脏分别对应的面部特征区域,并分别进行额心、双颧、鼻尖和下颏五块特征区域的划分;
所述的舌体区域分割步骤为:通过基于Snakes模型实现对舌体部分的分割,将舌体部分提取出来;
步骤四、基于YCbCr颜色空间对上述划分的五脏特征区域的颜色和光泽进行分析,并排除我国正常人的常色特点的影响,结合中医“五色诊”理论分析患者面部特征区域青、赤、黄、白、黑五色的变化,分析五脏特征区域的颜色和光泽信息;然后对舌体的舌质和舌苔信息进行分析,并与数据库中正常舌象分析比对,寻找出其中的变化,最后图像分析处理模块综合面色分析和舌象分析的结果,得到体质检测的结果;
步骤五、将患者的个人信息、采集图像、体质检测结果、对应体质养生计划集中生成到同一文档中,医生基于专业知识、诊断经验以及与患者之间的交流沟通,对体质分析报告进行适当的修改并打印提供给用户,同时电子存档。
CN201811087350.0A 2018-09-18 2018-09-18 基于面部和舌部图像采集的体质分析方法 Pending CN109300123A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811087350.0A CN109300123A (zh) 2018-09-18 2018-09-18 基于面部和舌部图像采集的体质分析方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811087350.0A CN109300123A (zh) 2018-09-18 2018-09-18 基于面部和舌部图像采集的体质分析方法

Publications (1)

Publication Number Publication Date
CN109300123A true CN109300123A (zh) 2019-02-01

Family

ID=65163515

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811087350.0A Pending CN109300123A (zh) 2018-09-18 2018-09-18 基于面部和舌部图像采集的体质分析方法

Country Status (1)

Country Link
CN (1) CN109300123A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109994186A (zh) * 2019-03-31 2019-07-09 山西慧虎健康科技有限公司 基于影像大数据的中医体质智能检测与调养系统及方法
CN110334649A (zh) * 2019-07-04 2019-10-15 五邑大学 一种人工视觉智能中医面诊五脏状态诊测方法及装置
CN110338763A (zh) * 2019-07-10 2019-10-18 五邑大学 一种智能中医诊测的图像处理方法及装置
CN110751625A (zh) * 2019-09-12 2020-02-04 北京中科芯健医疗科技有限公司 舌象采集装置及舌象采集方法
CN110960193A (zh) * 2019-12-12 2020-04-07 苏州杰胜通信息技术有限公司 基于面部和舌部图像采集的中医诊断分析系统及其方法
CN111599444A (zh) * 2020-05-18 2020-08-28 深圳市悦动天下科技有限公司 智能舌诊检测方法、装置、智能终端和存储介质
CN111696073A (zh) * 2020-04-29 2020-09-22 陕西尚善优选食品科技有限公司 一种基于深度学习的舌面诊检测方法
CN112420141A (zh) * 2020-11-19 2021-02-26 张磊 一种中医健康评估系统及其应用
CN113033488A (zh) * 2021-04-22 2021-06-25 脉景(杭州)健康管理有限公司 医疗特征识别方法及装置、电子设备、存储介质
CN114820603A (zh) * 2022-06-27 2022-07-29 深圳中易健康科技有限公司 基于ai舌诊图像处理的智能健康管理方法及相关装置
CN116784804A (zh) * 2023-07-19 2023-09-22 湖南云医链生物科技有限公司 一种未病分析评估系统

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109994186A (zh) * 2019-03-31 2019-07-09 山西慧虎健康科技有限公司 基于影像大数据的中医体质智能检测与调养系统及方法
CN110334649A (zh) * 2019-07-04 2019-10-15 五邑大学 一种人工视觉智能中医面诊五脏状态诊测方法及装置
CN110338763A (zh) * 2019-07-10 2019-10-18 五邑大学 一种智能中医诊测的图像处理方法及装置
CN110751625A (zh) * 2019-09-12 2020-02-04 北京中科芯健医疗科技有限公司 舌象采集装置及舌象采集方法
CN110960193A (zh) * 2019-12-12 2020-04-07 苏州杰胜通信息技术有限公司 基于面部和舌部图像采集的中医诊断分析系统及其方法
CN111696073A (zh) * 2020-04-29 2020-09-22 陕西尚善优选食品科技有限公司 一种基于深度学习的舌面诊检测方法
CN111599444A (zh) * 2020-05-18 2020-08-28 深圳市悦动天下科技有限公司 智能舌诊检测方法、装置、智能终端和存储介质
CN112420141A (zh) * 2020-11-19 2021-02-26 张磊 一种中医健康评估系统及其应用
CN112420141B (zh) * 2020-11-19 2024-01-26 张磊 一种中医健康评估系统及其应用
CN113033488A (zh) * 2021-04-22 2021-06-25 脉景(杭州)健康管理有限公司 医疗特征识别方法及装置、电子设备、存储介质
CN113033488B (zh) * 2021-04-22 2023-11-21 脉景(杭州)健康管理有限公司 医疗特征识别方法及装置、电子设备、存储介质
CN114820603A (zh) * 2022-06-27 2022-07-29 深圳中易健康科技有限公司 基于ai舌诊图像处理的智能健康管理方法及相关装置
CN114820603B (zh) * 2022-06-27 2022-09-16 深圳中易健康科技有限公司 基于ai舌诊图像处理的智能健康管理方法及相关装置
CN116784804A (zh) * 2023-07-19 2023-09-22 湖南云医链生物科技有限公司 一种未病分析评估系统

Similar Documents

Publication Publication Date Title
CN109300123A (zh) 基于面部和舌部图像采集的体质分析方法
TWI747372B (zh) 偵測臨床表徵的方法以及影像系統
US10004410B2 (en) System and methods for measuring physiological parameters
CN111728602A (zh) 基于ppg的无接触血压测量装置
CN108471949A (zh) 组织分类用反射模式多光谱时间分辨光学成像方法和设备
McDuff et al. Fusing partial camera signals for noncontact pulse rate variability measurement
CN103034775A (zh) 中医面诊分析与诊断系统
CN108564113A (zh) 一种基于深度神经网络和复杂度感知的舌苔体质识别方法
CN110960193A (zh) 基于面部和舌部图像采集的中医诊断分析系统及其方法
CN106780653A (zh) 人体经络与腧穴可视图的生成方法
CN1804850A (zh) 中医证素辨证诊疗系统
CN110338763A (zh) 一种智能中医诊测的图像处理方法及装置
CN110334649A (zh) 一种人工视觉智能中医面诊五脏状态诊测方法及装置
CN113362944B (zh) 一种基于机器学习的功能性消化不良和针刺疗效预测模型的评估方法
CN109994186A (zh) 基于影像大数据的中医体质智能检测与调养系统及方法
CN106778047A (zh) 一种基于多维度医学图像的中医面诊综合系统
CN113130066A (zh) 一种基于人工智能的舌诊图像识别方法
CN103735247B (zh) 用于健康状态辨识的掌色分析方法
CN114938952A (zh) 基于先验因果模型的血红蛋白浓度预测方法
KR102123121B1 (ko) 사용자의 신원 파악이 가능한 혈압 모니터링 방법 및 시스템
CN114332910A (zh) 一种面向远红外图像的相似特征计算的人体部位分割方法
CN109636864A (zh) 一种基于颜色校正与深度卷积神经网络的舌分割方法及系统
CN113539476A (zh) 基于人工智能的胃内窥活检拉曼图像辅助诊断方法和系统
CN107169399B (zh) 一种人脸生物特征获取装置及方法
CN109711306A (zh) 一种基于深度卷积神经网络获取面部特征的方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190201