CN106774879A - 一种基于ar虚拟现实技术的整形手术体验系统 - Google Patents

一种基于ar虚拟现实技术的整形手术体验系统 Download PDF

Info

Publication number
CN106774879A
CN106774879A CN201611141185.3A CN201611141185A CN106774879A CN 106774879 A CN106774879 A CN 106774879A CN 201611141185 A CN201611141185 A CN 201611141185A CN 106774879 A CN106774879 A CN 106774879A
Authority
CN
China
Prior art keywords
shaping
human body
unit
display units
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611141185.3A
Other languages
English (en)
Other versions
CN106774879B (zh
Inventor
童培诚
段会锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Original Assignee
DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd filed Critical DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Priority to CN201611141185.3A priority Critical patent/CN106774879B/zh
Publication of CN106774879A publication Critical patent/CN106774879A/zh
Application granted granted Critical
Publication of CN106774879B publication Critical patent/CN106774879B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种基于AR虚拟现实技术的整形手术体验系统，包括：图像采集单元,采集人体需要进行整形部位的图像信息；AR呈现单元，接收所述图像采集单元传送的人体需要整形部位的真实图像信息结合影像辨识技术展现该人体部位的虚拟图像，数据分析单元与AR呈现单元实时数据通信，工作状态下：当AR呈现单元为人体部位进行整形手术佩戴整形模型时所述数据分析单元根据人体的五官特征对每次佩戴的整形模型进行合理性分析整理出器官的曲线是否符合标准状态并绘制出整形后的图像；该系统还包括与AR呈现单元进行实时数据通信的终端单元，AR呈现单元将用户选择的整形模型以及该整形调整下用户的人体具体外部图像实时传送至终端单元。

Description

一种基于AR虚拟现实技术的整形手术体验系统
技术领域
本发明涉及虚拟现实技术领域，尤其涉及一种基于AR虚拟现实技术的整形手术体验系统。
背景技术
AR即增强现实是一种通过计算摄影机摄像的位置以及角度再结合相应的图像处理技术，这种技术的目的是在计算机屏幕上把虚拟世界在现实世界中进行互动和呈现。通常情况下技术人员是将显示器屏幕扩展到真实环境中，使计算机窗口与图标叠映于现实对象，由用户的眼睛、手势来指点进行操作让三维物体在用户的全景视野中根据当前任务或者需要交互的改变其形状和外观，对于现实目标通过叠加虚拟景象产生透视的增强效果。例如我们可以将地图信息直接插入到现实景观来引导驾驶员进行行车驾驶，用户可以通过虚拟现实技术来观看景观信息等等。
目前人体整形手术得到广大用户的关注和讨论的话题,很多人采用整形手术来调整自己的面部特征或者身体的其他部位特征从而使自己的五官更加完美,使自己的身心更加愉悦。但是现有技术中医生都是采用直接在人体上进行整形手术的方式,没有在手术前给出用户一个更明确的手术后图像信息,这样造成很多整形手术存在失败或者是用户不满意的现象。
发明内容
根据现有技术存在的问题，本发明公开了一种基于AR虚拟现实技术的整形手术体验系统，包括
图像采集单元,采集人体需要进行整形部位的图像信息；
AR呈现单元，接收所述图像采集单元传送的人体需要整形部位的真实图像信息结合影像辨识技术展现该人体部位的虚拟图像，所述AR呈现单元读取该人体部位的特征点信息将不同的整形模型投射、叠加到该部位进行虚拟现实展示，同时通过摄像头捕捉人体的影像信息,该人体部位的3D影像将以360度形式在患者的身体上显示；
数据分析单元，与所述AR呈现单元实时数据通信，工作状态下：当AR呈现单元为人体部位进行整形手术佩戴整形模型时所述数据分析单元根据人体的五官特征对每次佩戴的整形模型进行合理性分析整理出器官的曲线是否符合标准状态并绘制出整形后的图像；
整形体验单元，接收所述数据分析单元传送的数据信息根据上述选择的整形模型以及人体需要整形的部位进行整形体验，所述整形体验单元调取其内部存储的整形工具以及该整形过程中具体细节制作出整体整形流程并生成整形视频；
该系统还包括与AR呈现单元进行实时数据通信的终端单元，所述AR呈现单元将用户选择的整形模型以及该整形调整下用户的人体具体外部图像实时传送至终端单元。
所述AR呈现单元包括存储有与人体的多个器官进行配套的整形模型的存储模块和映射模块，在AR呈现单元为人体的器官进行整形展现时，所述映射模块实时对人体的实际器官的边缘部位与模型的边缘部位进行无缝对接。
所述数据分析单元包括存储有基于人体美学技术的人体各个面部器官和人体多个器官协调比例信息的数据模块和分析建议模块，所述分析建议模块结合人体美学技术对整形后的人体表情进行数据化分析和美感建议。
所述整形体验单元包括存储有各个整形过程中使用的工具信息的元素存储单元，所述元素存储单元内存储有各个工具的使用说明和与之匹配的手术类型以及该工具的操作手法，所述整形体验单元还包括视频体验生成单元，所述视频体验生成单元根据选择的整形工具和整形部位生成整形视频；
观看中用户可以调取每一整形步骤进行慢镜头播放读取元素存储单元内具体的整形手法和用力程度。
由于采用了上述技术方案，本发明提供的一种基于AR虚拟现实技术的整形手术体验系统，通过图像采集单位来采集人体需要整形的实际的图像信息，通过AR呈现单元进行整形匹配虚拟现实的图像显示，通过数据分析单元对整形结果进行理论分析和美感评价，这样用户可以根据虚拟现实相结合技术对整形后的情况进行详细的了解和观察，从而判定以及选择采用哪种方案进行整形手术。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明系统的结构示意图。
具体实施方式
为使本发明的技术方案和优点更加清楚，下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚完整的描述：
如图1所示的一种基于AR虚拟现实技术的整形手术体验系统，包括
图像采集单元,采集人体需要进行整形部位的图像信息；
AR呈现单元，接收所述图像采集单元传送的人体需要整形部位的真实图像信息结合影像辨识技术展现该人体部位的虚拟图像，所述AR呈现单元读取该人体部位的特征点信息将不同的整形模型投射、叠加到该部位进行虚拟现实展示，同时通过摄像头捕捉人体的影像信息,该人体部位的3D影像将以360度形式在患者的身体上显示；
数据分析单元，与所述AR呈现单元实时数据通信，工作状态下：当AR呈现单元为人体部位进行整形手术佩戴整形模型时所述数据分析单元根据人体的五官特征对每次佩戴的整形模型进行合理性分析整理出器官的曲线是否符合标准状态并绘制出整形后的图像；
整形体验单元，接收所述数据分析单元传送的数据信息根据上述选择的整形模型以及人体需要整形的部位进行整形体验，所述整形体验单元调取其内部存储的整形工具以及该整形过程中具体细节制作出整体整形流程并生成整形视频；
该系统还包括与AR呈现单元进行实时数据通信的终端单元，所述AR呈现单元将用户选择的整形模型以及该整形调整下用户的人体具体外部图像实时传送至终端单元。通过终端单元我们可以将整形后的形象进行远程传输，传送给其他的朋友或者服务终端进行分析和美感体验。
所述AR呈现单元包括存储有与人体的多个器官进行配套的整形模型的存储模块和映射模块，在AR呈现单元为人体的器官进行整形展现时，所述映射模块实时对人体的实际器官的边缘部位与模型的边缘部位进行无缝对接。采用无缝对接技术这样可以得到更加真实的图像信息，并且医护人员观看到对接方式可以帮助医护人员更好的进行整形手术，增加整形手术的成功性和完美性。
进一步的，所述数据分析单元包括存储有基于人体美学技术的人体各个面部器官和人体多个器官协调比例信息的数据模块和分析建议模块，所述分析建议模块结合人体美学技术对整形后的人体表情进行数据化分析和美感建议。通过数据模块我们可以调取其内部存储的人体美学的相关知识，例如用户选取了一种类型的整形手术但是不知道自己选取是否合格或者自己选取的是否美观然后我们可以调取分析建议模块让其对我们的整形后的图像进行分析给出合理性的分析报告，供医护人员和整形患者使用。
所述整形体验单元包括存储有各个整形过程中使用的工具信息的元素存储单元，所述元素存储单元内存储有各个工具的使用说明和与之匹配的手术类型以及该工具的操作手法，所述整形体验单元还包括视频体验生成单元，所述视频体验生成单元根据选择的整形工具和整形部位生成整形视频；
观看中用户可以调取每一整形步骤进行慢镜头播放读取元素存储单元内具体的整形手法和用力程度。医护人员可以根据整形体验单元随时调取该手术的具体过程以及每一个详细的手术步骤具体包括例如手术刀的使用过程，具体如何进行切割和缝合过程等等都有详细的讲解和说明，并且可以调取视频进行详细的观看，供医护人员使用。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (4)

1.一种基于AR虚拟现实技术的整形手术体验系统，其特征在于包括：
图像采集单元,采集人体需要进行整形部位的图像信息；
AR呈现单元，接收所述图像采集单元传送的人体需要整形部位的真实图像信息结合影像辨识技术展现该人体部位的虚拟图像，所述AR呈现单元读取该人体部位的特征点信息将不同的整形模型投射、叠加到该部位进行虚拟现实展示，同时通过摄像头捕捉人体的影像信息,该人体部位的3D影像将以360度形式在患者的身体上显示；
数据分析单元，与所述AR呈现单元实时数据通信，工作状态下：当AR呈现单元为人体部位进行整形手术佩戴整形模型时所述数据分析单元根据人体的五官特征对每次佩戴的整形模型进行合理性分析整理出器官的曲线是否符合标准状态并绘制出整形后的图像；
整形体验单元，接收所述数据分析单元传送的数据信息根据上述选择的整形模型以及人体需要整形的部位进行整形体验，所述整形体验单元调取其内部存储的整形工具以及该整形过程中具体细节制作出整体整形流程并生成整形视频；
该系统还包括与AR呈现单元进行实时数据通信的终端单元，所述AR呈现单元将用户选择的整形模型以及该整形调整下用户的人体具体外部图像实时传送至终端单元。
2.根据权利要求1所述的一种基于AR虚拟现实技术的整形手术体验系统，其特征在还于：所述AR呈现单元包括存储有与人体的多个器官进行配套的整形模型的存储模块和映射模块，在AR呈现单元为人体的器官进行整形展现时，所述映射模块实时对人体的实际器官的边缘部位与模型的边缘部位进行无缝对接。
3.根据权利要求1所述的一种基于AR虚拟现实技术的整形手术体验系统，其特征在还于：所述数据分析单元包括存储有基于人体美学技术的人体各个面部器官和人体多个器官协调比例信息的数据模块和分析建议模块，所述分析建议模块结合人体美学技术对整形后的人体表情进行数据化分析和美感建议。
4.根据权利要求1所述的一种基于AR虚拟现实技术的整形手术体验系统，其特征在还于：所述整形体验单元包括存储有各个整形过程中使用的工具信息的元素存储单元，所述元素存储单元内存储有各个工具的使用说明和与之匹配的手术类型以及该工具的操作手法，所述整形体验单元还包括视频体验生成单元，所述视频体验生成单元根据选择的整形工具和整形部位生成整形视频；
观看中用户可以调取每一整形步骤进行慢镜头播放读取元素存储单元内具体的整形手法和用力程度。
CN201611141185.3A 2016-12-12 2016-12-12 一种基于ar虚拟现实技术的整形手术体验系统 Active CN106774879B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611141185.3A CN106774879B (zh) 2016-12-12 2016-12-12 一种基于ar虚拟现实技术的整形手术体验系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611141185.3A CN106774879B (zh) 2016-12-12 2016-12-12 一种基于ar虚拟现实技术的整形手术体验系统

Publications (2)

Publication Number Publication Date
CN106774879A true CN106774879A (zh) 2017-05-31
CN106774879B CN106774879B (zh) 2019-09-03

Family

ID=58876081

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611141185.3A Active CN106774879B (zh) 2016-12-12 2016-12-12 一种基于ar虚拟现实技术的整形手术体验系统

Country Status (1)

Country Link
CN (1) CN106774879B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107369209A (zh) * 2017-07-07 2017-11-21 深圳市华琥技术有限公司 一种数据处理方法
CN110333756A (zh) * 2019-06-26 2019-10-15 杜剑波 用于气质美学设计咨询的全息增强现实系统
CN111834021A (zh) * 2020-07-20 2020-10-27 北京百度网讯科技有限公司 数据交互方法、装置、设备以及存储介质
CN112106127A (zh) * 2018-04-27 2020-12-18 克里赛利克斯有限公司 医疗平台

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200412900A (en) * 2003-01-20 2004-08-01 Dong-Wu Lv System for assisting cosmetic surgery
KR20040075672A (ko) * 2003-02-21 2004-08-30 정보통신연구진흥원 계층적 가상 성형시뮬레이션 방법
KR20090000635A (ko) * 2007-03-12 2009-01-08 주식회사 케이티 사용자의 선호도를 만족시키는 3차원 얼굴 성형 시스템 및그 방법
KR20140006138A (ko) * 2012-06-26 2014-01-16 동서대학교산학협력단 가상성형 단말기 및 그를 이용한 가상성형 시스템
KR20140028523A (ko) * 2012-08-29 2014-03-10 주식회사 쓰리디팩토리 무안경 ３ｄ 방식을 이용한 성형외과 운영 시스템 및 방법
KR101397476B1 (ko) * 2012-11-28 2014-05-20 주식회사 에스하이텍 3d 가상성형기를 이용한 가상성형방법
CN103902098A (zh) * 2012-12-27 2014-07-02 株式会社东芝 整形装置和整形方法
KR20150093930A (ko) * 2014-02-09 2015-08-19 주홍찬 증강현실을 이용한 메이크업 장치 및 방법
US20150272691A1 (en) * 2014-03-31 2015-10-01 Tricubics Inc. Method and apparatus for providing virtual plastic surgery sns service
KR101556992B1 (ko) * 2014-03-13 2015-10-05 손우람 얼굴 성형 시뮬레이션을 이용한 3차원 스캔 시스템
US20160128450A1 (en) * 2011-03-01 2016-05-12 Sony Corporation Information processing apparatus, information processing method, and computer-readable storage medium
CN105608741A (zh) * 2015-12-17 2016-05-25 四川大学 预测颌面骨整形术后软组织容貌变化的计算机仿真方法
US20160148435A1 (en) * 2014-11-26 2016-05-26 Restoration Robotics, Inc. Gesture-Based Editing of 3D Models for Hair Transplantation Applications
CN105761239A (zh) * 2015-12-30 2016-07-13 中南大学 一种黄金比例引导的三维人脸模型重建方法
CN105938627A (zh) * 2016-04-12 2016-09-14 湖南拓视觉信息技术有限公司 用于人脸虚拟整形的处理方法和系统
US20160335481A1 (en) * 2015-02-06 2016-11-17 Ming Chuan University Method for creating face replacement database

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200412900A (en) * 2003-01-20 2004-08-01 Dong-Wu Lv System for assisting cosmetic surgery
KR20040075672A (ko) * 2003-02-21 2004-08-30 정보통신연구진흥원 계층적 가상 성형시뮬레이션 방법
KR20090000635A (ko) * 2007-03-12 2009-01-08 주식회사 케이티 사용자의 선호도를 만족시키는 3차원 얼굴 성형 시스템 및그 방법
US20160128450A1 (en) * 2011-03-01 2016-05-12 Sony Corporation Information processing apparatus, information processing method, and computer-readable storage medium
KR20140006138A (ko) * 2012-06-26 2014-01-16 동서대학교산학협력단 가상성형 단말기 및 그를 이용한 가상성형 시스템
KR20140028523A (ko) * 2012-08-29 2014-03-10 주식회사 쓰리디팩토리 무안경 ３ｄ 방식을 이용한 성형외과 운영 시스템 및 방법
KR101397476B1 (ko) * 2012-11-28 2014-05-20 주식회사 에스하이텍 3d 가상성형기를 이용한 가상성형방법
CN103902098A (zh) * 2012-12-27 2014-07-02 株式会社东芝 整形装置和整形方法
KR20150093930A (ko) * 2014-02-09 2015-08-19 주홍찬 증강현실을 이용한 메이크업 장치 및 방법
KR101556992B1 (ko) * 2014-03-13 2015-10-05 손우람 얼굴 성형 시뮬레이션을 이용한 3차원 스캔 시스템
US20150272691A1 (en) * 2014-03-31 2015-10-01 Tricubics Inc. Method and apparatus for providing virtual plastic surgery sns service
US20160148435A1 (en) * 2014-11-26 2016-05-26 Restoration Robotics, Inc. Gesture-Based Editing of 3D Models for Hair Transplantation Applications
US20160335481A1 (en) * 2015-02-06 2016-11-17 Ming Chuan University Method for creating face replacement database
CN105608741A (zh) * 2015-12-17 2016-05-25 四川大学 预测颌面骨整形术后软组织容貌变化的计算机仿真方法
CN105761239A (zh) * 2015-12-30 2016-07-13 中南大学 一种黄金比例引导的三维人脸模型重建方法
CN105938627A (zh) * 2016-04-12 2016-09-14 湖南拓视觉信息技术有限公司 用于人脸虚拟整形的处理方法和系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107369209A (zh) * 2017-07-07 2017-11-21 深圳市华琥技术有限公司 一种数据处理方法
CN112106127A (zh) * 2018-04-27 2020-12-18 克里赛利克斯有限公司 医疗平台
CN110333756A (zh) * 2019-06-26 2019-10-15 杜剑波 用于气质美学设计咨询的全息增强现实系统
CN111834021A (zh) * 2020-07-20 2020-10-27 北京百度网讯科技有限公司 数据交互方法、装置、设备以及存储介质

Also Published As

Publication number Publication date
CN106774879B (zh) 2019-09-03

Similar Documents

Publication Publication Date Title
CN106170083B (zh) 用于头戴式显示器设备的图像处理
CN113168007B (zh) 用于增强现实的系统和方法
US11819273B2 (en) Augmented and extended reality glasses for use in surgery visualization and telesurgery
EP3497544B1 (en) Distributed interactive medical visualization system with primary/secondary interaction features
CN102981616B (zh) 增强现实中对象的识别方法及系统和计算机
Van Krevelen et al. A survey of augmented reality technologies, applications and limitations
US20210283496A1 (en) Realistic Virtual/Augmented/Mixed Reality Viewing and Interactions
US20120256950A1 (en) Medical support apparatus, medical support method, and medical support system
CN106774879B (zh) 一种基于ar虚拟现实技术的整形手术体验系统
CN106580472B (zh) 一种基于ar虚拟现实技术的整形手术实时捕捉系统
US20220114788A1 (en) Fast hand meshing for dynamic occlusion
CN115115810B (zh) 一种基于空间姿态捕捉的多人协同病灶定位与增强展示方法
US20210278671A1 (en) Head wearable device with adjustable image sensing modules and its system
CN105894571A (zh) 一种处理多媒体信息的方法及装置
US20200205905A1 (en) Distributed interactive medical visualization system with user interface and primary/secondary interaction features
Saggio et al. Augmented reality for restoration/reconstruction of artefacts with artistic or historical value
CN106780760A (zh) 一种基于ar虚拟现实技术的整形手术观摩系统
US20220301264A1 (en) Devices, methods, and graphical user interfaces for maps
CN108346458A (zh) 医用教学ar用捕捉叠加系统
TW202017368A (zh) 智慧眼鏡、系統及其使用方法
US11907434B2 (en) Information processing apparatus, information processing system, and information processing method
Andersen Effective User Guidance Through Augmented Reality Interfaces: Advances and Applications
Balani Investigation of Interaction Metaphors for Augmented and Virtual Reality on Multi-Platforms for Medical Applications
CN112558767A (zh) 多个功能界面处理的方法和系统及其ar眼镜
WO2024064380A1 (en) User interfaces for gaze tracking enrollment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 116023 No. 1111, Block B, 32 Torch Road, Dalian High-tech Industrial Park, Liaoning Province

Applicant after: Fast creation technology (Dalian) Co., Ltd.

Address before: 116000 Dalian, Liaoning hi tech Zone Torch Road, No. 32 venture building, block B, 1101

Applicant before: Dalian Wensente Software Technology Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant