LU505456B1 - Method for recognizing pain expression in elderly patients - Google Patents
Method for recognizing pain expression in elderly patients Download PDFInfo
- Publication number
- LU505456B1 LU505456B1 LU505456A LU505456A LU505456B1 LU 505456 B1 LU505456 B1 LU 505456B1 LU 505456 A LU505456 A LU 505456A LU 505456 A LU505456 A LU 505456A LU 505456 B1 LU505456 B1 LU 505456B1
- Authority
- LU
- Luxembourg
- Prior art keywords
- pain
- face
- image
- expression
- model
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/175—Static expression
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/0464—Convolutional networks [CNN, ConvNet]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/09—Supervised learning
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Software Systems (AREA)
- Biophysics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Human Computer Interaction (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Claims (5)
1. Fine Methode zur Erkennung des Schmerzausdrucks bei älteren Patienten, umfasst die folgenden Schritte: Schritt 1. Erhalten eines Gesichtsbildes unter Verwendung von MTCNN zur Gesichtserkennung, um die erforderliche Gesichtsregion zu erhalten; Schritt 2. Durchführen einer Bildvorverarbeitung für die Gesichtsregion; Schritt 3. Aufbau und Training des Resnet50-Netzwerkmodells; Schritt 4. Eingabe des in Schritt 2 erhaltenen Bildes in das in Schritt 3 erhaltene Resnet50-Netzwerkmodell zur Vorhersage des Schmerzniveaus des Schmerzausdrucks.
2. Fine Methode zur Erkennung des Schmerzausdrucks bei älteren Patienten nach Anspruch 1, dadurch gekennzeichnet, dass MTCNN zur Gesichtserkennung in Schritt 1 verwendet wird und es umfasst die folgenden Schritte: Schritt 1.1 Eingabe des Gesichtsbildes in das Netzwerk P-Net der ersten Schicht. Zunächst wird das Eingabebild in mehreren Ebenen skaliert, das Schiebefenster von 12x12 mit einer SchrittgrôBe von 2 wird verwendet, um die Schiebeerkennung für das Bild bei jedem SkalierungsmaBbstab durchzuführen, bei allen erkannten Gesichtsrahmen wird eine nicht maximale Unterdrückung durchgefiihrt, anschlieBend werden die Gesichtsrahmen in die Originalgröße konvertiert, und die kurzen Seiten werden ausgefüllt, um sie in einen 24x24 quadratischen Gesichtsrahmen umzuwandeln; Schritt 1.2 Eingabe einer Vielzahl von 24x24 quadratischen Gesichtsrahmen, die aus Schritt 1.1 erhalten wurden, in das Netzwerk der zweiten Schicht R-Net zur Verarbeitung, dann Entfernen von Gesichtsrahmen unterhalb der Schwelle durch nicht maximale Unterdrückung, und schließlich GrôBenänderung auf 48x48 quadratischen Gesichtsrahmen; Schritt 1.3 Eingabe einer Vielzahl von 48x48 quadratischen Gesichtsrahmen, die in Schritt 1.2 erhalten wurden, in das Netzwerk O-Net der dritten Schicht zur 17505656 Verarbeitung, um den genauen Gesichtsrahmen, fünf Gesichtspositionsmarkierungen und das Konfidenzniveau zu erhalten, und dann eine nicht maximale Unterdrückung der genauen Gesichtsrahmen durchführen, um die optimale Position der Gesichtsregion zu erhalten.
3. Fine Methode zur Erkennung des Schmerzausdrucks bei älteren Patienten nach Anspruch 1, dadurch gekennzeichnet, dass die Bildvorverarbeitung in Schritt 2 wie folgt ist: Zuschneiden der Gesichtsregion und Normalisieren des Bildes nach dem Zuschneiden auf die Größe von 224 x 224 Pixel.
4. Fine Methode zur Erkennung des Schmerzausdrucks bei älteren Patienten nach Anspruch 3, dadurch gekennzeichnet, dass Schritt 3 im Einzelnen die folgenden Schritte umfasst: Schritt 3.1 Erstens die sequenzielle Erfassung unterschiedlicher Schmerzausprägungen der älteren Bevölkerung durch Aufzeichnen von Videos, und Extrahieren des Schlisselrahmens der gewünschten Ausdrücke aus den aufgenommenen Videos, anschließend werden die wichtigsten Rahmenbilder ausgewertet und klassifiziert, zunächst werden die Schmerz- und Nicht-Schmerzbilder basierend auf dem Zustand zum Zeitpunkt der Aufnahme getrennt, und dann Markieren und Beschriften der aufgenommenen Bilder gemäB den Kriterien von vier Schmerzkategorien, nämlich leicht, offensichtlich, stark und akut; Schritt 3.2 Es wird eine Skalennormalisierung an den in Schritt 3.1 erhaltenen Bilddaten durchgeführt, um den Datensatz zu erhalten. Schritt 3.3 Aufteilen des aus Schritt 3.2 erhaltenen Datensatzes in Trainingssatz, Validierungssatz und Testsatz im Verhältnis 6:2:2, nachdem der gesamte Datensatz gemischt und desorganisiert wurde; Schritt 3.4 Durchführen des Verbesserungsprozesses zum Drehen, Zuschneiden und Schwenken des in Schritt 3.3 erhaltenen Trainingssatzes; Schritt 3.5 Aufbau des Resnet50-Netzwerkmodells, Festlegen der Lernrate auf
0,0001, BatchgrôBe auf 32, Auswahl des Adam-Optimierers durch den Optimierer und 7505456 Durchführung des Modelltrainings mit dem aus Schritt 3.4 erhaltenen Trainingssatz, nachdem die Parameter festgelegt wurden; Schritt 3.6 Unter Verwendung der Genauigkeit ACC als Bewertungsindex für das in Schritt 3.5 erhaltene Modell, unter der Annahme, dass Nan die Anzahl der Bilder im in Schritt 3.3 erhaltenen Validierungssatz darstellt und N, die Anzahl korrekt klassifizierter Bilder darstellt, der Ausdruck für ACC lautet ACC = Ny/Nau, Je größer der ACC-Wert, desto näher sind die Vorhersagen des Modells an der realen Situation und desto besser ist die Leistung des Modells; Schritt 3.7 Wenn das in Schritt 3.6 erhaltene Modell beginnt, mit der Anzahl der Iterationen zu konvergieren und die Genauigkeit des Validierungssatzes dynamisch stabil bleibt, ist das Training des Resnet50-Netzwerkmodells abgeschlossen; Schritt 3.8 Verwenden Sie den in Schritt 3.3 erhaltenen Testsatz, um das in Schritt 3.7 erhaltene Modell zu testen.
5. Eine Methode zur Erkennung des Schmerzausdrucks bei älteren Patienten nach Anspruch 4, dadurch gekennzeichnet, dass Schritt 4 im Einzelnen die folgenden Schritte umfasst: Schritt 4.1 Das in Schritt 2 erhaltene normalisierte Bild wird in das in Schritt 3 erhaltene Resnet50-Netzwerkmodell eingegeben, und der Softmax-Klassifikator wird verwendet, um die charakteristische Matrixeingabe von der vollständig verbundenen Schicht zu empfangen und den Wahrscheinlichkeitswert jeder Klassifizierung auszugeben, der dem Eingabeziel entspricht, unter der Annahme, dass es N Eingabeziele {X;Y}£.4 gibt, jedes mit der Bezeichnung yi € {1,2 ,... k} und k der Typ der Modellausgabeklassifizierung ist, k > 2; Klassifizieren Sie die Schmerzausdrücke in 4 Kategorien (1, 2, 3, 4), k nimmt den Wert 4 an; Geben Sie Xi ein und verwenden Sie die Hypothesenfunktion fo(Xi), um den Wahrscheinlichkeitswert P (y = ]/Xi) der entsprechenden Klassifizierung j zu schätzen. Die Hypothesenfunktion lautet:
© LU505456 Se = x & HE af = Se of X à $ N ae OX ou à & = § à AE. * 3 : PES 203 Die Verlustfunktion für den Softmax-Klassifikator lautet: i: : 3 eg En N ie Ÿ ss § X FE gs SE vos N © * Tide mx og Man} © « 33 RE J juni SA 580 Sà a Rodd #5 Schritt 4.2 Die Etikettenklassifizierung mit der maximalen Wahrscheinlichkeit, die von Softmax ausgegeben wird, wird als Schmerzniveau des Schmerzausdrucks verwendet, und wenn das Schmerzniveau viele Male hintereinander gleich ist, wird es als das vorhergesagte Schmerzniveau betrachtet und das Ergebnis ausgegeben.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| LU505456A LU505456B1 (en) | 2023-11-08 | 2023-11-08 | Method for recognizing pain expression in elderly patients |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| LU505456A LU505456B1 (en) | 2023-11-08 | 2023-11-08 | Method for recognizing pain expression in elderly patients |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| LU505456B1 true LU505456B1 (en) | 2024-05-08 |
Family
ID=91070552
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| LU505456A LU505456B1 (en) | 2023-11-08 | 2023-11-08 | Method for recognizing pain expression in elderly patients |
Country Status (1)
| Country | Link |
|---|---|
| LU (1) | LU505456B1 (de) |
-
2023
- 2023-11-08 LU LU505456A patent/LU505456B1/en active IP Right Grant
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108830252B (zh) | 一种融合全局时空特征的卷积神经网络人体动作识别方法 | |
| CN106683048A (zh) | 一种图像超分辨率方法及设备 | |
| CN114581432B (zh) | 一种基于深度学习的舌象仪舌象分割方法 | |
| CN110879982B (zh) | 一种人群计数系统及方法 | |
| CN111967379A (zh) | 一种基于rgb视频和骨架序列的人体行为识别方法 | |
| CN104992223A (zh) | 基于深度学习的密集人数估计方法 | |
| CN111062278A (zh) | 基于改进残差网络的异常行为识别方法 | |
| CN107944399A (zh) | 一种基于卷积神经网络目标中心模型的行人重识别方法 | |
| CN107657204A (zh) | 深层网络模型的构建方法及人脸表情识别方法和系统 | |
| CN110827304B (zh) | 一种基于深度卷积网络与水平集方法的中医舌像定位方法和系统 | |
| CN115861651B (zh) | 一种基于NAM和YOLOv3的目标检测方法 | |
| CN115346149A (zh) | 基于时空图卷积网络的跳绳计数方法和系统 | |
| CN114783611B (zh) | 基于人工智能的神经康复动作检测系统 | |
| CN111291631B (zh) | 视频分析方法及其相关的模型训练方法、设备、装置 | |
| CN112597842B (zh) | 基于人工智能的运动检测面瘫程度评估系统 | |
| CN108491766A (zh) | 一种端到端的基于深度决策森林的人群计数方法 | |
| CN116758621B (zh) | 基于自注意力机制的遮挡人脸面部表情深度卷积识别方法 | |
| CN112446233A (zh) | 一种基于多时间尺度推理的动作识别方法及装置 | |
| CN114913086B (zh) | 基于生成对抗网络的人脸图像质量增强方法 | |
| CN111680705A (zh) | 适于目标检测的mb-ssd方法和mb-ssd特征提取网络 | |
| CN118072395A (zh) | 一种结合多模态帧间运动和共享注意力权重的动态手势识别方法 | |
| CN114882595A (zh) | 一种武装人员行为识别方法和系统 | |
| CN116612339B (zh) | 一种核性白内障图像分级模型的构建装置及分级装置 | |
| CN113052799A (zh) | 一种基于Mask RCNN网络的骨肉瘤和骨软骨瘤预测方法 | |
| CN117237994A (zh) | 一种油气作业区人员计数及行为检测方法、装置及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FG | Patent granted |
Effective date: 20240508 |