KR20210040887A - 용모 변화 조작 결과를 예측하는 방법, 장치, 전자 기기, 저장 매체 및 프로그램 - Google Patents
용모 변화 조작 결과를 예측하는 방법, 장치, 전자 기기, 저장 매체 및 프로그램 Download PDFInfo
- Publication number
- KR20210040887A KR20210040887A KR1020210038965A KR20210038965A KR20210040887A KR 20210040887 A KR20210040887 A KR 20210040887A KR 1020210038965 A KR1020210038965 A KR 1020210038965A KR 20210038965 A KR20210038965 A KR 20210038965A KR 20210040887 A KR20210040887 A KR 20210040887A
- Authority
- KR
- South Korea
- Prior art keywords
- data
- feature
- manipulation
- target user
- result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
- G06F30/27—Design optimisation, verification or simulation using machine learning, e.g. artificial intelligence, neural networks, support vector machines [SVM] or training a model
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G06K9/00268—
-
- G06K9/00362—
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/169—Holistic features and representations, i.e. based on the facial image taken as a whole
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Public Health (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Pathology (AREA)
- Databases & Information Systems (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Computer Hardware Design (AREA)
- Geometry (AREA)
- User Interface Of Digital Computer (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
Description
도 1은 본 출원의 실시예가 응용될 수 있는 예시적인 시스템 아키텍처 도면이다.
도 2는 본 출원에 따른 용모 변화 조작 결과를 예측하는 방법의 일 실시예의 흐름도이다.
도 3은 본 출원에 따른 용모 변화 조작 결과를 예측하는 방법의 일 응용 시나리오의 개략도이다.
도 4는 본 출원에 따른 용모 변화 조작 결과를 예측하는 방법의 다른 실시예의 흐름도이다.
도 5는 본 출원에 따른 용모 변화 조작 결과를 예측하는 방법의 다른 실시예의 흐름도이다.
도 6은 본 출원에 따른 용모 변화 조작 결과를 예측하는 장치의 일 실시예의 구조 개략도이다.
도 7은 본 출원의 실시예의 용모 변화 조작 결과를 예측하는 방법을 구현하는 전자 기기의 블록도이다.
Claims (17)
- 용모 변화 조작 결과를 예측하는 방법으로서,
용모 변화 조작의 샘플 데이터를 취득하는 단계 - 상기 샘플 데이터는 상기 용모 변화 조작 전의 사용자의 제1 용모 데이터 및 상기 제1 용모 데이터에 대응되는 상기 용모 변화 조작 후의 제2 용모 데이터를 포함함 - ;
상기 제1 용모 데이터 및 상기 제2 용모 데이터에 기반하여 용모 변화 조작의 결과 예측 모델을 구축하는 단계; 및
목표 사용자의 용모 데이터 및 의도하는 용모 변화 조작을 취득하고, 상기 목표 사용자의 용모 데이터 및 의도하는 용모 변화 조작에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 용모 데이터를 예측하는 단계;를 포함하는, 방법. - 제1항에 있어서,
상기 구축하는 단계는,
상기 제1 용모 데이터 및 상기 제2 용모 데이터에 대해 키포인트 특징의 추출을 수행하는 단계; 및
상기 제1 용모 데이터의 키포인트 특징에서 상기 제2 용모 데이터의 키포인트 특징으로 변환되는 변환 관계를 모델링하여 상기 결과 예측 모델을 획득하는 단계;를 포함하는, 방법. - 제1항에 있어서,
상기 제2 용모 데이터에 대응되는 사용자 신체상태 데이터를 취득하는 단계;를 더 포함하고,
상기 구축하는 단계는,
상기 제1 용모 데이터 및 상기 제2 용모 데이터, 상기 사용자 신체상태 데이터에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 구축하는 단계;를 포함하고,
상기 방법은,
상기 용모 변화 조작의 결과 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 신체상태 정보를 예측하는 단계;를 더 포함하는, 방법. - 제1항에 있어서,
상기 샘플 데이터는,
상기 용모 변화 조작 전의 사용자의 제1 신체징후 데이터 및 상기 제1 용모 데이터에 대응되는 상기 용모 변화 조작 후의 제2 신체징후 데이터를 더 포함하는, 방법. - 제4항에 있어서,
상기 제1 신체징후 데이터 및 상기 제2 신체징후 데이터에 따라 신체징후 예측 모델을 구축하는 단계; 및
상기 목표 사용자의 신체징후 데이터 및 상기 의도하는 용모 변화 조작을 취득하고, 상기 목표 사용자의 신체징후 데이터에 기반하여 상기 신체징후 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 신체징후 데이터를 예측하는 단계;를 더 포함하는, 방법. - 제4항에 있어서,
상기 구축하는 단계는,
상기 제1 용모 데이터, 상기 제2 용모 데이터, 상기 제1 신체징후 데이터 및 상기 제2 신체징후 데이터에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 구축하는 단계;를 포함하고,
상기 방법은
상기 목표 사용자의 신체징후 데이터 및 상기 의도하는 용모 변화 조작을 취득하고, 상기 목표 사용자의 신체징후 데이터 및 상기 의도하는 용모 변화 조작에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 신체징후 데이터를 예측하는 단계;를 더 포함하는, 방법. - 제1항 내지 제6항 중 어느 한 항에 있어서,
상기 용모 변화 조작의 결과 예측 모델의, 목표 사용자의 의도하는 용모 변화 조작에 대한 예측 결과에 기반하여 상기 목표 사용자의 의도하는 용모 변화 조작의 조작 리스크 제시 정보를 생성하는 단계;를 더 포함하는, 방법. - 용모 변화 조작 결과를 예측하는 장치로서,
용모 변화 조작의 샘플 데이터를 취득하는 취득 유닛 - 상기 샘플 데이터는 상기 용모 변화 조작 전의 사용자의 제1 용모 데이터 및 상기 제1 용모 데이터에 대응되는 용모 변화 조작 후의 제2 용모 데이터를 포함함 - ;
상기 제1 용모 데이터 및 상기 제2 용모 데이터에 기반하여 용모 변화 조작의 결과 예측 모델을 구축하는 모델링 유닛; 및
목표 사용자의 용모 데이터 및 의도하는 용모 변화 조작을 취득하고, 상기 목표 사용자의 용모 데이터 및 의도하는 용모 변화 조작에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 용모 데이터를 예측하는 예측 유닛을 포함하는, 장치. - 제8항에 있어서,
상기 모델링 유닛은,
상기 제1 용모 데이터 및 상기 제2 용모 데이터에 대해 키포인트 특징 추출을 수행하는 추출 모듈; 및
상기 제1 용모 데이터의 키포인트 특징에서 상기 제2 용모 데이터의 키포인트 특징으로 변환되는 변환 관계를 모델링하여 상기 결과 예측 모델을 획득하는 제1 모델링 모듈;을 포함하는, 장치. - 제8항에 있어서,
상기 취득 유닛은,
상기 제2 용모 데이터에 대응되는 사용자 신체상태 데이터를 취득하고,
상기 모델링 유닛은,
상기 제1 용모 데이터 및 상기 제2 용모 데이터, 상기 사용자 신체상태 데이터에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 구축하는 제1 모델링 서브유닛;을 포함하고
상기 장치는,
상기 용모 변화 조작의 결과 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 신체상태 정보를 예측하는 제2 모델링 모듈;을 더 포함하는, 장치. - 제8항에 있어서,
상기 샘플 데이터는 상기 용모 변화 조작 전의 사용자의 제1 신체징후 데이터 및 상기 제1 용모 데이터에 대응되는 상기 용모 변화 조작 후의 제2 신체징후 데이터를 더 포함하는, 장치. - 제11항에 있어서,
상기 제1 신체징후 데이터 및 상기 제2 신체징후 데이터에 따라 신체징후 예측 모델을 구축하는 제3 모델링 모듈; 및
상기 목표 사용자의 신체징후 데이터 및 상기 의도하는 용모 변화 조작을 취득하고 상기 목표 사용자의 용모 변화 조작 전의 신체징후 데이터에 기반하여, 상기 신체징후 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 신체징후 데이터를 예측하는 신체징후 예측 모듈;을 더 포함하는, 장치. - 제11항에 있어서,
상기 모델링 유닛은,
상기 제1 용모 데이터, 상기 제2 용모 데이터, 상기 제1 신체징후 데이터 및 상기 제2 신체징후 데이터에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 구축하는 제2 모델링 서브유닛;을 포함하고,
상기 장치는,
상기 목표 사용자의 신체징후 데이터 및 상기 의도하는 용모 변화 조작을 취득하고, 상기 목표 사용자의 신체징후 데이터 및 상기 의도하는 용모 변화 조작에 기반하여 상기 용모 변화 조작의 결과 예측 모델을 이용하여 상기 목표 사용자의 의도하는 용모 변화 조작 후의 신체징후 데이터를 예측하는 제4 모델링 모듈;을 더 포함하는, 장치. - 제8항 내지 제13항 중 어느 한 항에 있어서,
상기 용모 변화 조작의 결과 예측 모델의, 목표 사용자의 의도하는 용모 변화 조작에 대한 예측 결과에 기반하여 상기 목표 사용자의 의도하는 용모 변화 조작의 조작 리스크 제시 정보를 생성하는 제시 유닛;을 더 포함하는, 장치. - 전자 기기로서,
적어도 하나의 프로세서; 및
상기 적어도 하나의 프로세서에 통신적으로 연결되는 메모리;를 포함하고,
상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행될 수 있는 명령이 저장되어 있고, 상기 명령은 상기 적어도 하나의 프로세서에 의해 실행됨으로써 상기 적어도 하나의 프로세서가 제1항 내지 제7항 중 어느 한 항의 방법을 실행하도록 하는, 전자 기기. - 컴퓨터 명령이 저장되어 있는 비일시적 컴퓨터 판독가능 저장 매체로서,
상기 컴퓨터 명령은 상기 컴퓨터에 의해 제1항 내지 제7항 중 어느 한 항의 방법이 수행되도록 하는, 비일시적 컴퓨터 판독가능 저장 매체. - 매체에 저장된 컴퓨터 프로그램으로서,
상기 프로그램이 프로세서에 의해 실행되는 경우, 제1항 내지 제7항 중 어느 한 항의 방법이 수행되는, 매체에 저장된 컴퓨터 프로그램.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010608567.2A CN111767676B (zh) | 2020-06-30 | 2020-06-30 | 用于预测容貌变化操作结果的方法和装置 |
| CN202010608567.2 | 2020-06-30 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20210040887A true KR20210040887A (ko) | 2021-04-14 |
Family
ID=72724123
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210038965A Ceased KR20210040887A (ko) | 2020-06-30 | 2021-03-25 | 용모 변화 조작 결과를 예측하는 방법, 장치, 전자 기기, 저장 매체 및 프로그램 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US20210209345A1 (ko) |
| EP (1) | EP3828897A1 (ko) |
| JP (1) | JP2022003506A (ko) |
| KR (1) | KR20210040887A (ko) |
| CN (1) | CN111767676B (ko) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113487597B (zh) * | 2021-07-23 | 2023-08-29 | 四川大学 | 一种正畸术后侧貌预测方法、装置、电子设备及存储介质 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7953260B2 (en) * | 2006-06-09 | 2011-05-31 | Craniosim Solutions, Inc. | Predicting movement of soft tissue of the face in response to movement of underlying bone |
| EP2569755A4 (en) * | 2010-05-21 | 2017-06-28 | My Orthodontics Pty Ltd | Prediction of post-procedural appearance |
| CN105608741A (zh) * | 2015-12-17 | 2016-05-25 | 四川大学 | 预测颌面骨整形术后软组织容貌变化的计算机仿真方法 |
| US10839578B2 (en) * | 2018-02-14 | 2020-11-17 | Smarter Reality, LLC | Artificial-intelligence enhanced visualization of non-invasive, minimally-invasive and surgical aesthetic medical procedures |
| JP6566373B1 (ja) * | 2018-10-25 | 2019-08-28 | ジャパンモード株式会社 | 施術支援システム |
| US20200143293A1 (en) * | 2018-11-01 | 2020-05-07 | Microsoft Technology Licensing, Llc | Machine Learning Based Capacity Management Automated System |
| CN109994206A (zh) * | 2019-02-26 | 2019-07-09 | 华为技术有限公司 | 一种容貌预测方法及电子设备 |
| US11151462B2 (en) * | 2020-02-04 | 2021-10-19 | Vignet Incorporated | Systems and methods for using machine learning to improve processes for achieving readiness |
| KR20230128441A (ko) * | 2020-06-08 | 2023-09-05 | 키네시오메트릭스, 아이엔씨. | 사용자 컴퓨팅 장치의 건강 데이터를 사용하여 신체 활동 레벨을 평가하기 위한 시스템 및 방법 |
-
2020
- 2020-06-30 CN CN202010608567.2A patent/CN111767676B/zh active Active
-
2021
- 2021-03-24 JP JP2021049337A patent/JP2022003506A/ja active Pending
- 2021-03-25 KR KR1020210038965A patent/KR20210040887A/ko not_active Ceased
- 2021-03-25 US US17/212,023 patent/US20210209345A1/en not_active Abandoned
- 2021-03-26 EP EP21165224.3A patent/EP3828897A1/en not_active Ceased
Also Published As
| Publication number | Publication date |
|---|---|
| US20210209345A1 (en) | 2021-07-08 |
| CN111767676B (zh) | 2024-10-22 |
| JP2022003506A (ja) | 2022-01-11 |
| CN111767676A (zh) | 2020-10-13 |
| EP3828897A1 (en) | 2021-06-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11210569B2 (en) | Method, apparatus, server, and user terminal for constructing data processing model | |
| US20230010160A1 (en) | Multimodal data processing | |
| KR102871692B1 (ko) | 객체 추천 방법 및 장치, 컴퓨터 기기 및 매체 | |
| EP3244312B1 (en) | A personal digital assistant | |
| US11175895B2 (en) | Code generation and simulation for graphical programming | |
| US11995547B2 (en) | Predicting and visualizing outcomes using a time-aware recurrent neural network | |
| CN109923560A (zh) | 使用变分信息瓶颈来训练神经网络 | |
| CN113240778A (zh) | 虚拟形象的生成方法、装置、电子设备和存储介质 | |
| CN111966361B (zh) | 用于确定待部署模型的方法、装置、设备及其存储介质 | |
| KR102797062B1 (ko) | 전자 장치 및 그 제어 방법 | |
| JPWO2018079225A1 (ja) | 自動予測システム、自動予測方法および自動予測プログラム | |
| EP3848818A1 (en) | Method and apparatus for generating descriptions of video clips, electronic device, stroage medium, and computer program product | |
| JP2024502177A (ja) | 価値関数の最適化および所望のデータの生成のための教師付きvae | |
| CN116580212A (zh) | 图像生成方法、图像生成模型的训练方法、装置和设备 | |
| KR20210040887A (ko) | 용모 변화 조작 결과를 예측하는 방법, 장치, 전자 기기, 저장 매체 및 프로그램 | |
| CN116453221A (zh) | 目标对象姿态确定方法、训练方法、装置以及存储介质 | |
| US20190197564A1 (en) | Product space representation mapping | |
| US9507913B2 (en) | Data driven reduction of multi-scale models | |
| CN110738318B (zh) | 网络结构运行时间评估及评估模型生成方法、系统和装置 | |
| CN114675913B (zh) | 页面布局信息处理方法、装置、电子设备和介质 | |
| CN116340909B (zh) | 信息编码方法、信息追溯方法及装置 | |
| US20240152554A1 (en) | System and methods for generating contextual graphs and integrated uses thereof | |
| US20220327290A1 (en) | Method of training feature determination model, method of performing semantic analysis, and electronic device | |
| CN114789470A (zh) | 仿真机器人的调整方法和装置 | |
| CN121457654A (zh) | 注视方向的表征学习方法及注视方向的表征向量确定方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20210325 |
|
| PA0201 | Request for examination | ||
| PG1501 | Laying open of application | ||
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20230405 Patent event code: PE09021S01D |
|
| E601 | Decision to refuse application | ||
| PE0601 | Decision on rejection of patent |
Patent event date: 20230619 Comment text: Decision to Refuse Application Patent event code: PE06012S01D Patent event date: 20230405 Comment text: Notification of reason for refusal Patent event code: PE06011S01I |