CN113558570A - 人工智慧云端肤质与皮肤病灶识别方法及其系统 - Google Patents
人工智慧云端肤质与皮肤病灶识别方法及其系统 Download PDFInfo
- Publication number
- CN113558570A CN113558570A CN202010355296.4A CN202010355296A CN113558570A CN 113558570 A CN113558570 A CN 113558570A CN 202010355296 A CN202010355296 A CN 202010355296A CN 113558570 A CN113558570 A CN 113558570A
- Authority
- CN
- China
- Prior art keywords
- skin
- feature vector
- extracted image
- parameters
- vector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 206010040882 skin lesion Diseases 0.000 title claims abstract description 30
- 231100000444 skin lesion Toxicity 0.000 title claims abstract description 29
- 238000000034 method Methods 0.000 title claims abstract description 24
- 239000013598 vector Substances 0.000 claims abstract description 131
- 230000036555 skin type Effects 0.000 claims abstract description 30
- 238000010801 machine learning Methods 0.000 claims description 33
- 238000013473 artificial intelligence Methods 0.000 claims description 17
- 238000013527 convolutional neural network Methods 0.000 claims description 16
- 238000013528 artificial neural network Methods 0.000 claims description 9
- 238000009795 derivation Methods 0.000 claims 1
- 208000007256 Nevus Diseases 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 206010064912 Malignant transformation Diseases 0.000 description 4
- 230000007850 degeneration Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000036212 malign transformation Effects 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 210000002569 neuron Anatomy 0.000 description 3
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000003211 malignant effect Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000009396 hybridization Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000002243 precursor Substances 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
- A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Dermatology (AREA)
- Evolutionary Computation (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physiology (AREA)
- Psychiatry (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明提供一种人工智慧云端肤质与皮肤病灶识别方法及其系统。此系统包括电子装置及服务器。服务器包括存储装置及处理器。处理器耦接存储装置，存取并执行存储于存储装置的多个模块，多个模块包括：信息接收模块，接收提取图像及多个用户参数；特征矢量取得模块，取得提取图像的第一特征矢量，并计算多个用户参数的第二特征矢量；肤质参数取得模块，根据第一特征矢量及第二特征矢量取得关联于肤质参数的输出结果；以及肤质识别模块，根据肤质参数的输出结果决定对应的识别结果。
Description
技术领域
本发明涉及一种肤质及皮肤病灶检测技术，尤其涉及一种人工智慧云端肤质与皮肤病灶识别方法及其系统。
背景技术
一般来说，皮肤科医生除了从外观判断皮肤状况之外，还会通过问诊来综合判断皮肤是否出现异常状况。通过外观及问诊结果，医生可以初步判断皮肤的状态。举例来说，若皮肤上的痣在一段时间内明显变大或有异常凸起，则有可能是病变的前兆。一旦发生病变便需要花费时间治疗而造成身体的负担，因此提早发现病情以及时进行治疗是避免受苦的最好方法。
然而，目前皮肤变化状态均需通过医生的专业判断，一般用户容易忽略皮肤的改变，且难以自己初步判断皮肤是否出现异常状况。因此，如何有效且明确地得知皮肤状况，是本领域技术人员所欲解决的问题之一。
发明内容
有鉴于此，本发明提供一种人工智慧云端肤质与皮肤病灶识别方法及其系统，其可同时考量皮肤图像及用户回答问题的内容，通过皮肤图像及用户参数决定皮肤识别结果。
本发明提供一种人工智慧云端肤质与皮肤病灶识别系统，包括电子装置及服务器。电子装置取得提取图像及多个用户参数。服务器连接所述电子装置，所述服务器包括存储装置及处理器。存储装置存储多个模块。处理器耦接所述存储装置，存取并执行存储于所述存储装置的所述多个模块，所述多个模块包括信息接收模块、特征矢量取得模块、肤质参数取得模块及肤质识别模块。信息接收模块接收所述提取图像及所述多个用户参数；特征矢量取得模块取得所述提取图像的第一特征矢量，并计算所述多个用户参数的第二特征矢量；肤质参数取得模块根据所述第一特征矢量及所述第二特征矢量取得关联于肤质参数的输出结果；以及肤质识别模块根据所述输出结果决定对应于所述提取图像的肤质识别结果。
在本发明的一实施例中，上述特征矢量取得模块取得所述提取图像的所述第一特征矢量的运作包括：利用机器学习模型取得所述提取图像的所述第一特征矢量。
在本发明的一实施例中，上述特征矢量取得模块计算所述多个用户参数的所述第二特征矢量的运作包括：利用矢量表示各所述多个用户参数；将矢量化的各所述多个用户参数合并并输入至机器学习模型的全连接层以取得所述第二特征矢量。
在本发明的一实施例中，上述多个用户参数包括性别参数、年龄参数、患部面积大小、时间参数或患部变化参数的组合。
在本发明的一实施例中，上述肤质参数取得模块根据所述第一特征矢量及所述第二特征矢量取得关联于所述肤质参数的所述输出结果的运作包括：合并所述第一特征矢量及所述第二特征矢量以取得合并矢量；以及输入所述合并矢量至机器学习模型的全连接层以取得所述输出结果，其中所述输出结果关联于所述肤质参数的目标机率。
在本发明的一实施例中，上述肤质识别模块根据所述肤质参数决定对应于所述提取图像的所述肤质识别结果的运作包括：根据所述输出结果决定对应于所述提取图像的所述肤质识别结果。
在本发明的一实施例中，上述机器学习模型包括卷积神经网络或深度神经网络。
本发明提供一种人工智慧云端肤质与皮肤病灶识别方法，适用于具有处理器的服务器，所述方法包括下列步骤：接收提取图像及多个用户参数；取得所述提取图像的第一特征矢量，并计算所述多个用户参数的第二特征矢量；根据所述第一特征矢量及所述第二特征矢量取得关联于肤质参数的输出结果；以及根据所述输出结果决定对应于所述提取图像的肤质识别结果。
为让本发明的上述特征和优点能更明显易懂，下文特举实施例，并配合附图作详细说明如下。
附图说明
图1示出本发明一实施例的人工智慧云端肤质与皮肤病灶识别系统的示意图；
图2示出本发明一实施例的电子装置及服务器的元件方块图；
图3示出本发明一实施例的人工智慧云端肤质与皮肤病灶识别方法的流程图；
图4示出本发明一实施例的人工智慧云端肤质与皮肤病灶识别方法的流程图。
具体实施方式
现将详细地参考本发明的示范性实施例，示范性实施例的实例说明于附图中。只要有可能，相同元件符号在附图和描述中用来表示相同或相似部分。
本发明同时考量皮肤图像及用户回答问题的内容，利用机器学习模型取得皮肤图像的特征矢量，并计算用户参数的特征矢量。接着根据皮肤图像的特征矢量及用户参数的特征矢量取得关联于肤质参数的输出结果以决定皮肤识别结果。藉此，可同时考量皮肤图像及用户回答问题的内容来决定皮肤病灶或肤质的识别结果。
本发明的部份实施例接下来将会配合附图来详细描述，以下的描述所引用的元件符号，当不同附图出现相同的元件符号将视为相同或相似的元件。这些实施例只是本发明的一部份，并未揭示所有本发明的可实施方式。更确切的说，这些实施例只是本发明的权利要求中的方法以及人工智慧云端肤质与皮肤病灶识别系统的范例。
图1示出本发明一实施例的人工智慧云端肤质与皮肤病灶识别系统的示意图。参照图1，人工智慧云端肤质与皮肤病灶识别系统1至少包括但不仅限于电子装置10及服务器20。其中服务器20可分别与多个电子装置10连接。
图2示出本发明一实施例的电子装置及服务器的元件方块图。参照图2，电子装置10可包括但不仅限于通信通信装置11、处理器12及存储装置13。电子装置10例如是具备运算功能的智能手机、平板电脑、便携式电脑、个人电脑或其他装置，本发明不在此限制。服务器20可包括但不仅限于通信通信装置21、处理器22及存储装置23。服务器20例如是电脑主机、远端服务器、后台主机或其他装置，本发明不在此限制。
通信通信装置11及通信通信装置21可以是支援诸如第三代(3G)、第四代(4G)、第五代(5G)或更后世代行动通信、Wi-Fi、乙太网络、光纤网络等通信收发器，以连线至互联网。服务器20通过通信通信装置21与电子装置10的通信通信装置11通信连接以与电子装置10互相传输数据。
处理器12耦接通信通信装置11及存储装置13，处理器22耦接通信通信装置21及存储装置23，并且处理器12及处理器22可以分别存取并执行存储于存储装置13及存储装置23的多个模块。在不同实施例中，处理器12及处理器22可以分别例如是中央处理单元(Central Processing Unit，CPU)，或是其他可编程的一般用途或特殊用途的微处理器(Microprocessor)、数字信号处理器(Digital Signal Processor，DSP)、可编程控制器、特殊应用集成电路(Application Specific Integrated Circuits，ASIC)、可编程逻辑装置(Programmable Logic Device，PLD)或其他类似装置或这些装置的组合，本发明不在此限制。
存储装置13及存储装置23例如是任何型态的固定式或可移动式随机存取存储器(Random Access Memory，RAM)、只读存储器(read-only memory，ROM)、快闪存储器(flashmemory)、硬盘或类似元件或上述元件的组合而用以存储可分别由处理器12及处理器22执行的程序。于本实施例中，存储装置23用于存储缓冲的或永久的数据、软件模块(例如，信息接收模块231、特征矢量取得模块232、肤质参数取得模块233及肤质识别模块234等)等数据或档案，且其详细内容待后续实施例详述。
图3示出本发明一实施例的人工智慧云端肤质与皮肤病灶识别方法的流程图。请同时参照图2及图3，本实施例的方法适用于上述人工智慧云端肤质与皮肤病灶识别系统1，以下即搭配电子装置10及服务器20的各项装置及元件说明本实施例的人工智慧云端肤质与皮肤病灶识别方法的详细步骤。本技术领域人员应可理解，上述存储在服务器20的软件模块不一定要在服务器20上执行，也可以是下载并存储至电子装置10的存储装置13中，而由电子装置10执行所述软件模块进行人工智慧云端肤质与皮肤病灶识别方法。
首先，处理器22存取并执行信息接收模块231以接收提取图像及多个用户参数(步骤S301)。其中，提取图像及各用户参数可以由服务器20中的通信通信装置21自电子装置10接收。在一实施例中，提取图像及多个用户参数先由电子装置10取得。详细而言，电子装置10耦接于图像来源装置(未示出)并且从图像来源装置取得提取图像。图像来源装置可以是配置于电子装置10的相机，也可以是存储装置13、外接的存储卡或远端服务器等用以存储图像的装置，本发明不在此限制。也就是说，用户例如是操作电子装置10通过相机拍摄图像，或者是操作从装置中取得先前拍摄好的图像，并且将选择好的图像传输至服务器20作为提取图像供后续操作使用。
此外，服务器20会提供多个问题要求用户回答，当用户通过电子装置10回答这些问题后，回答的结果将传输至服务器20作为用户参数供后续操作使用。其中，用户例如是通过电子装置10显示的一用户界面来回答问题，用户界面可以是通信软件的聊天室、网页、语音助理或其他可供互动功能的软件界面，本发明不在此限制。
接着，处理器22存取并执行特征矢量取得模块232以取得提取图像的第一特征矢量，并计算多个用户参数的第二特征矢量(步骤S302)。
详细而言，为了取得提取图像的第一特征矢量，处理器22先通过皮肤病变图像样本及用户参数样本训练机器学习模型内各层的参数值。在一实施例中，上述机器学习模型例如是利用类神经网络(Neural Network)等技术所建构的机器学习模型，以类神经网络为例，其输入层与输出层之间是由众多的神经元和链接组成，其中可包含多个隐藏层(hiddenlayer)，各层节点(神经元)的数目不定，可使用数目较多的节点以增强该类神经网络的强健性。在本实施例中，机器学习模型例如是卷积神经网络(Convolutional NeuralNetwork，CNN)或深度神经网络(Deep Neural Networks，DNN)，本发明不在此限制。以卷积神经网络为例，可以将皮肤病变图像所对应的参数数值作为机器学习模型的输入至卷积神经网络，并利用反向传递(Backward propagation)进行训练以利用最后的目标函数(loss/cost function)来进行各层参数的更新，而可训练学习模型内各层的参数值，其中例如是以误差均方和(mean square error)当作目标函数。其中，各皮肤病变图像样本可以是用现有的ResNet50、InceptionV3等卷积神经网络模型架构来训练。
接着可将图像输入至训练好的机器学习模型来取得图像特征。在一实施例中，特征矢量取得模块232利用机器学习模型取得提取图像的第一特征矢量。也就是说，在训练机器学习模型后，处理器22将提取图像输入至训练好的机器学习模型，并且提取提取图像的第一特征矢量。
另一方面，特征矢量取得模块232还会计算多个用户参数的第二特征矢量。其中，特征矢量取得模块232例如是利用矢量表示各用户参数，将矢量化的各用户参数合并并输入至机器学习模型的全连接层(Fully Connected Layer)以取得第二特征矢量。其中，合并后的矢量化的各用户参数的维度与问题数量和问题内部的选项有关。
详细而言，特征矢量取得模块232会将服务器20从电子装置10接收到的用户参数使用指示函数(indicator function)来编码。举例而言，若问题是用户的性别，当用户回答性别为男，则产生矢量(1,0,0)；当用户回答性别为女，则产生矢量(0,1,0)；当用户不想回答性别，则产生矢量(0,0,1)。在编码完所有用户参数之后，特征矢量取得模块232会将编码完的各用户参数合并以取得合并矢量，并将合并后的合并矢量输入至全连接层来进行杂交并输出N维的矢量。其中，全连接层会考量各用户参数彼此之间的交互作用而产生出矢量维度比原先各用户参数的矢量维度还多的第二特征矢量，例如，输入16维度的矢量至全连接层可以产生256维度的矢量。在一实施例中，多个用户参数包括性别参数、年龄参数、患部面积大小、时间参数或患部变化参数其中之一或其组合。
接着，处理器22存取并执行肤质参数取得模块233以根据第一特征矢量及第二特征矢量取得关联于肤质参数的输出结果(步骤S303)。其中，肤质参数取得模块233合并第一特征矢量及第二特征矢量以取得合并矢量，并且输入合并矢量至机器学习模型的全连接层以取得输出结果，其中输出结果关联于肤质参数的目标机率。在一实施例中，由于通过机器学习模型取得的第一特征矢量得到可能是二维结构的图片，因此可以先将第一特征矢量转换成一维空间的矢量后再与第二特征矢量合并产生合并矢量。
详细而言，肤质参数取得模块233会合并特征矢量取得模块232取得的提取图像的第一特征矢量以及从多个用户参数计算出的第二特征矢量，并将第一特征矢量及第二特征矢量合并为合并矢量。接着，肤质参数取得模块233将合并矢量输入至全连接层，并在输出层(Output Layer)产生输出结果。其中输出结果的数量与想分类(classification)的输出结果数目有关，假设最终希望输出结果分为两个类别(例如：皮肤无状况与皮肤有状况)，则在输出层有两个输出类别的肤质参数，本发明不在此限制输出类别的数量。最终合并矢量输入至全连接层会转化成各个输出类别的机率(介于0到1之间)。在本实施例中，肤质参数例如是“痣”、“青春痘”或“肤况”等不同组输出类别中分别分为“恶变风险较低的痣/恶变风险较高的痣”、“青春痘/非青春痘”或“肤况好/肤况不好”等不同的分类，并且输出结果关联于各组输出类别中各肤质参数的目标机率。
最后，处理器22存取并执行肤质识别模块234以根据输出结果决定对应于提取图像的肤质识别结果(步骤S304)。其中，肤质识别模块234根据输出结果决定对应于提取图像的肤质识别结果。详细而言，输出结果中机率最大的即是最有可能的类别。
基于上述，本发明的实施例在输入图像至机器学习模型取得图像的特征矢量，并利用全连接层计算出用户参数的矢量后，将两者矢量合并作为数据输入机器学习模型的全连接层，并通过全连接层产生输出结果。也就是说，本发明除了考虑图片的信息以外，还同时考虑非图片信息，通过建立能够同时考虑图片及非图片信息的机器学习模型，以更真实地模拟临床判断肤质的情境并使模型精准度提高。
以下实施例以“痣”为例，其中输出类别“痣”分为“恶变风险较低的痣”与“恶变风险较高的痣”两个肤质参数，并且在本实施例中，使用卷积神经网络作为机器学习模型的范例。图4示出本发明一实施例的人工智慧云端肤质与皮肤病灶识别方法的流程图。请参照图4，首先，处理器22接收提取图像及多个用户参数(步骤S401)。在本实施例中，用户利用电子装置10拍摄或从电子装置10选取提取图像，提取图像的图片大小例如是按照现有的卷积神经网络的输入格式与尺寸设置为224x224，因此提取图像可以表示为(224,224,3)的矩阵，其中3代表RGB颜色的位阶。并且用户回答服务器20提供的多个问题，其中问题例如是包括“性别(男,女,不想回答)”、“年龄(20岁以下,21～40岁,41-65岁,66岁以上)”、“患部面积(小于等于0.6厘米,大于0.6厘米)”、“存在时间(小于等于1年,大于1年且小于2年,大于2年,没注意)”或“患部变化(最近一个月有变化,最近一个月无变化,没注意)”的组合。处理器22接收由电子装置10传输的提取图像及多个用户参数。
接着，处理器22利用卷积神经网络取得提取图像的第一特征矢量(步骤S4021)。并且处理器22计算多个用户参数的第二特征矢量(步骤S4022)。其中，处理器22将提取图像输入至训练好的卷积神经网络来取得提取图像的第一特征矢量，其中卷积神经网络系利用关于“痣”的图像来训练。并且服务器20接收用户的回答后，处理器22将回答编码为矢量，例如在本实施例中，若用户回答为男、20岁以下、小于等于0.6厘米、小于等于1年、最近一个月有变化，则矢量化的回答为性别(1,0,0)、年龄(1,0,0,0)、患部面积(1,0)、存在时间(1,0,0,0)及患部变化(1,0,0)。接着，处理器22在维度上合并矢量化的各多个用户参数以取得合并矢量，并且处理器22输入合并矢量至机器学习模型的全连接层以取得第二特征矢量。
接着，处理器22合并第一特征矢量及第二特征矢量以取得合并矢量(步骤S403)。接着，处理器22输入合并矢量至卷积神经网络的全连接层以取得输出结果(步骤S404)。在本实施例中，处理器22对第一特征矢量及第二特征矢量在维度上进行合并以取得合并矢量，并且输入合并矢量至卷积神经网络的全连接层以取得输出结果，其中输出结果关联于输出类别“痣”中两个肤质参数“恶变风险较低的痣/恶变风险较高的痣”分别的目标机率。
最后，处理器22根据输出结果决定对应于提取图像的肤质识别结果(步骤S405)。在本实施例中，输出结果中若肤质参数“恶变风险较低的痣”的机率大则决定提取图像中包括恶变风险较低的痣，若肤质参数“恶变风险较高的痣”的机率大则决定提取图像中包括恶变风险较高的痣。
在另一实施例中，若卷积神经网络系利用“青春痘”等其他关于病灶的图像或是“肤况”等关于肤质的图像来训练，并且针对“青春痘”或“肤况”等病灶或肤质提出不同的用于判断病灶或肤质的问题作为用户参数，则本发明的系统及方法建立的模型可用于协助判断“青春痘”、“肤况”或其他的病灶或肤质的图像是否符合特定病灶或肤质的状态。
在另一实施例中，本发明实施例提供的人工智慧云端肤质与皮肤病灶识别方法所建立的人工智慧云端肤质与皮肤病灶识别模型，可利用反向传递进行训练以利用最后的目标函数来进行各层参数的更新，以使模型的识别精准度提高。
综上所述，本发明提供的人工智慧云端肤质与皮肤病灶识别方法及其系统可同时考量皮肤图像及用户回答问题的内容，在输入图像至机器学习模型取得图像的特征矢量，并利用全连接层计算出用户参数的矢量后，将图像的特征矢量及用户参数的矢量合并作为数据输入机器学习模型的全连接层，并通过全连接层产生输出结果。藉此，可根据皮肤图像的特征矢量及用户参数的特征矢量取得各肤质参数的机率以决定病灶或肤质的识别结果。也就是说，本发明除了考虑图片的信息以外，还同时考虑非图片信息，通过建立能够同时考虑图片及非图片信息的机器学习模型，以更真实地模拟临床判断病灶或肤质时以患部状态及问答结果判断的情境来使模型精准度提高。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (14)
1.一种人工智慧云端肤质与皮肤病灶识别系统，包括：
电子装置，取得提取图像及多个用户参数；以及
服务器，连接所述电子装置，所述服务器包括：
存储装置，存储多个模块；以及
处理器，耦接所述存储装置，存取并执行存储于所述存储装置的所述多个模块，所述多个模块包括：
信息接收模块，接收所述提取图像及所述多个用户参数；
特征矢量取得模块，取得所述提取图像的第一特征矢量，并计算所述多个用户参数的第二特征矢量；
肤质参数取得模块，根据所述第一特征矢量及所述第二特征矢量取得关联于肤质参数的输出结果；以及
肤质识别模块，根据所述输出结果决定对应于所述提取图像的肤质识别结果。
2.根据权利要求1所述的人工智慧云端肤质与皮肤病灶识别系统，其中所述特征矢量取得模块取得所述提取图像的所述第一特征矢量的运作包括：
利用机器学习模型取得所述提取图像的所述第一特征矢量。
3.根据权利要求1所述的人工智慧云端肤质与皮肤病灶识别系统，其中所述特征矢量取得模块计算所述多个用户参数的所述第二特征矢量的运作包括：
利用矢量表示各所述多个用户参数；以及
将矢量化的各所述多个用户参数合并并输入至机器学习模型的全连接层以取得所述第二特征矢量。
4.根据权利要求3所述的人工智慧云端肤质与皮肤病灶识别系统，其中所述多个用户参数包括性别参数、年龄参数、患部面积大小、时间参数或患部变化参数的组合。
5.根据权利要求1所述的人工智慧云端肤质与皮肤病灶识别系统，其中所述肤质参数取得模块根据所述第一特征矢量及所述第二特征矢量取得关联于所述肤质参数的所述输出结果的运作包括：
合并所述第一特征矢量及所述第二特征矢量以取得合并矢量；以及
输入所述合并矢量至机器学习模型的全连接层以取得所述输出结果，其中所述输出结果关联于所述肤质参数的目标机率。
6.根据权利要求5所述的人工智慧云端肤质与皮肤病灶识别系统，其中所述肤质识别模块根据所述肤质参数决定对应于所述提取图像的所述肤质识别结果的运作包括：
根据所述输出结果决定对应于所述提取图像的所述肤质识别结果。
7.根据权利要求2所述的人工智慧云端肤质与皮肤病灶识别系统，其中所述机器学习模型包括卷积神经网络或深度神经网络。
8.一种人工智慧云端肤质与皮肤病灶识别方法，适用于具有处理器的服务器，所述方法包括下列步骤：
接收提取图像及多个用户参数；
取得所述提取图像的第一特征矢量，并计算所述多个用户参数的第二特征矢量；
根据所述第一特征矢量及所述第二特征矢量取得关联于肤质参数的输出结果；以及
根据所述输出结果决定对应于所述提取图像的肤质识别结果。
9.根据权利要求8所述的人工智慧云端肤质与皮肤病灶识别方法，其中取得所述提取图像的第一特征矢量的步骤包括：
利用机器学习模型取得所述提取图像的所述第一特征矢量。
10.根据权利要求8所述的人工智慧云端肤质与皮肤病灶识别方法，其中计算所述多个用户参数的所述第二特征矢量的步骤包括：
利用矢量表示各所述多个用户参数；以及
将矢量化的各所述多个用户参数合并并输入至机器学习模型的全连接层以取得所述第二特征矢量。
11.根据权利要求10所述的人工智慧云端肤质与皮肤病灶识别方法，其中所述多个用户参数包括性别参数、年龄参数、患部面积大小、时间参数或患部变化参数的组合。
12.根据权利要求8所述的人工智慧云端肤质与皮肤病灶识别方法，其中根据所述第一特征矢量及所述第二特征矢量取得关联于所述肤质参数的所述输出结果的步骤包括：
合并所述第一特征矢量及所述第二特征矢量以取得合并矢量；以及
输入所述合并矢量至机器学习模型的全连接层以取得所述输出结果，其中所述输出结果关联于所述肤质参数的目标机率。
13.根据权利要求12所述的人工智慧云端肤质与皮肤病灶识别方法，其中根据所述肤质参数决定对应于所述提取图像的所述肤质识别结果的步骤包括：
根据所述输出结果决定对应于所述提取图像的所述肤质识别结果。
14.根据权利要求9所述的人工智慧云端肤质与皮肤病灶识别方法，其中所述机器学习模型包括卷积神经网络或深度神经网络。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010355296.4A CN113558570A (zh) | 2020-04-29 | 2020-04-29 | 人工智慧云端肤质与皮肤病灶识别方法及其系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010355296.4A CN113558570A (zh) | 2020-04-29 | 2020-04-29 | 人工智慧云端肤质与皮肤病灶识别方法及其系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113558570A true CN113558570A (zh) | 2021-10-29 |
Family
ID=78158402
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010355296.4A Pending CN113558570A (zh) | 2020-04-29 | 2020-04-29 | 人工智慧云端肤质与皮肤病灶识别方法及其系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113558570A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103823918A (zh) * | 2012-11-16 | 2014-05-28 | 三星电子株式会社 | 计算机辅助诊断方法和设备 |
| KR20170107778A (ko) * | 2016-03-16 | 2017-09-26 | 동국대학교 산학협력단 | 피부질환 진단 방법 및 피부질환 진단 시스템 |
| CN108198620A (zh) * | 2018-01-12 | 2018-06-22 | 洛阳飞来石软件开发有限公司 | 一种基于深度学习的皮肤疾病智能辅助诊断系统 |
| CN110755045A (zh) * | 2019-10-30 | 2020-02-07 | 湖南财政经济学院 | 一种皮肤病综合数据分析诊断辅助系统及信息处理方法 |
| KR20200028571A (ko) * | 2018-09-06 | 2020-03-17 | (주)레파토리 | 인공지능 기반의 피부상태 분석에 의한 피부 분석정보 생성 방법 |
-
2020
- 2020-04-29 CN CN202010355296.4A patent/CN113558570A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103823918A (zh) * | 2012-11-16 | 2014-05-28 | 三星电子株式会社 | 计算机辅助诊断方法和设备 |
| KR20170107778A (ko) * | 2016-03-16 | 2017-09-26 | 동국대학교 산학협력단 | 피부질환 진단 방법 및 피부질환 진단 시스템 |
| CN108198620A (zh) * | 2018-01-12 | 2018-06-22 | 洛阳飞来石软件开发有限公司 | 一种基于深度学习的皮肤疾病智能辅助诊断系统 |
| KR20200028571A (ko) * | 2018-09-06 | 2020-03-17 | (주)레파토리 | 인공지능 기반의 피부상태 분석에 의한 피부 분석정보 생성 방법 |
| CN110755045A (zh) * | 2019-10-30 | 2020-02-07 | 湖南财政经济学院 | 一种皮肤病综合数据分析诊断辅助系统及信息处理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11270169B2 (en) | Image recognition method, storage medium and computer device | |
| TWI728369B (zh) | 人工智慧雲端膚質與皮膚病灶辨識方法及其系統 | |
| CN111783902B (zh) | 数据增广、业务处理方法、装置、计算机设备和存储介质 | |
| CN106709254B (zh) | 一种医疗诊断机器人系统 | |
| US20210057069A1 (en) | Method and device for generating medical report | |
| CN112395979B (zh) | 基于图像的健康状态识别方法、装置、设备及存储介质 | |
| US11328418B2 (en) | Method for vein recognition, and apparatus, device and storage medium thereof | |
| Jebadurai et al. | Super-resolution of retinal images using multi-kernel SVR for IoT healthcare applications | |
| CN110163111A (zh) | 基于人脸识别的叫号方法、装置、电子设备及存储介质 | |
| CN112419326B (zh) | 图像分割数据处理方法、装置、设备及存储介质 | |
| US20240054760A1 (en) | Image detection method and apparatus | |
| CN115620384B (zh) | 模型训练方法、眼底图像预测方法及装置 | |
| WO2021114818A1 (zh) | 基于傅里叶变换的oct图像质量评估方法、系统及装置 | |
| CN110363072A (zh) | 舌象识别方法、装置、计算机设备及计算机可读存储介质 | |
| CN116486422A (zh) | 数据处理的方法和相关设备 | |
| CN115910319A (zh) | 耳科问诊辅助方法、装置、电子设备及存储介质 | |
| TWM586599U (zh) | 人工智慧雲端膚質與皮膚病灶辨識系統 | |
| CN114708493A (zh) | 一种中医裂纹舌诊便携设备及使用方法 | |
| CN110675312B (zh) | 图像数据处理方法、装置、计算机设备以及存储介质 | |
| CN117010971A (zh) | 一种基于人像识别的智能健康险提供方法及系统 | |
| CN116704066A (zh) | 图像生成模型的训练方法、装置、终端及存储介质 | |
| CN113558570A (zh) | 人工智慧云端肤质与皮肤病灶识别方法及其系统 | |
| CN108038496A (zh) | 基于大数据与深度学习的婚恋对象匹配数据处理方法、装置、计算机设备和存储介质 | |
| KR100915922B1 (ko) | 영상인식을 통한 얼굴 특징 추출과 사상체질 판별 방법 및시스템 | |
| CN113762046A (zh) | 图像识别方法、装置、设备以及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20211029 |