CN103400119B - 基于人脸识别技术的混合显示眼镜交互展示方法 - Google Patents

基于人脸识别技术的混合显示眼镜交互展示方法 Download PDF

Info

Publication number
CN103400119B
CN103400119B CN201310330817.0A CN201310330817A CN103400119B CN 103400119 B CN103400119 B CN 103400119B CN 201310330817 A CN201310330817 A CN 201310330817A CN 103400119 B CN103400119 B CN 103400119B
Authority
CN
China
Prior art keywords
face
glasses
virtual
user
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310330817.0A
Other languages
English (en)
Other versions
CN103400119A (zh
Inventor
徐坚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NANJING MIAOMI TECHNOLOGY Co.,Ltd.
Original Assignee
徐坚
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 徐坚 filed Critical 徐坚
Priority to CN201310330817.0A priority Critical patent/CN103400119B/zh
Publication of CN103400119A publication Critical patent/CN103400119A/zh
Application granted granted Critical
Publication of CN103400119B publication Critical patent/CN103400119B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

基于人脸识别技术的混合显示眼镜交互展示方法,基于混合现实技术,将采集的现实中用户脸部图像与眼镜的三维虚拟模型叠加,并显示给用户。本发明针对现有技术中的问题,结合人脸识别技术和混合现实技术,提供一种应用在人机交互领域的虚拟眼镜交互展示方法,通过摄像采集技术,将人脸图像进行数字化采集,之后通过人脸识别模块将图像中的人脸信息分割提取,识别出人脸的三维姿态信息;对虚拟眼镜同人脸的位置变化进行实时配准,最终在显示屏上呈现出虚拟的且具有真实感的眼镜“戴”在人脸上的效果。

Description

基于人脸识别技术的混合显示眼镜交互展示方法
技术领域
本发明属于计算机图像处理技术领域,涉及混合现实技术,为一种基于人脸识别技术的混合显示眼镜交互展示方法。
背景技术
由于眼镜选购时常常需要试戴,因此一方面顾客没法在一个眼镜店中尝试大量的款式,另一方面要求顾客必须到眼镜店中进行试戴,这些原因阻碍了将眼镜销售方式从传统的店铺销售转移到线上销售的创新。人脸识别技术利用图像分析技术,对人脸进行特征定位,特别是通过高性能的算法实现人脸旋转时的实时定位。但是,传统人脸识别定位技术大都用于身份识别技术,较少用于人机交互领域。
混合现实技术通过电脑技术,将虚拟的信息应用到真实世界,真实的环境和虚拟的物体实施地叠加到了同一个画面或空间同时存在。由于算法比较复杂,常用的混合现实大都以二维码等标记物进行定位,对于人脸等三维自然物体的实时跟踪定位的应用较少。
目前已知较多的虚拟换衣、虚拟穿衣等相关应用,这些应用在基于人体骨骼分析的情况下能够获得较好的匹配效果。但是,尽管有不少应用提到能够实现虚拟眼镜的功能,但大都不能够显示较好的实时性的匹配的效果。
发明内容
本发明针对现有技术中的问题,结合人脸识别技术和混合现实技术,提供一种应用在人机交互领域的虚拟眼镜交互展示方法,通过摄像采集技术,将人脸图像进行数字化采集,之后通过人脸识别模块将图像中的人脸信息分割提取,识别出人脸的三维姿态信息;对虚拟眼镜同人脸的位置变化进行实时配准,最终在显示屏上呈现出虚拟的且具有真实感的眼镜“戴”在人脸上的效果。
本发明的技术方案为:基于人脸识别技术的混合显示眼镜交互展示方法,基于混合现实技术,将采集的现实中用户脸部图像与虚拟眼镜的三维模型叠加,并显示给用户,包括以下步骤:
1)准备阶段,对人脸与虚拟眼镜进行配准:
11)由图像采集装置采集包含人脸的图像;
12)利用主动外观模型算法对采集图像中的人脸进行识别;
13)将人脸识别结果转换为对人脸的位置和旋转的六自由度信息;
14)根据步骤13)的识别结果,将虚拟的眼镜模型与人脸位置进行配准;
15)通过至少六对对应位置和角度配准对,计算得到3×3变换矩阵,所述变换矩阵表示虚拟眼镜所处的虚拟世界坐标系与现实中的现实世界坐标系之间的变换映射关系;
2)实时跟踪阶段,虚拟眼镜同人脸进行实时跟踪匹配:
21)实时获得图像采集装置采集的包含用户脸部的图像,识别出用户脸部位置和角度信息,根据变换矩阵,对应实时变换虚拟眼镜的位置和角度;
22)将步骤21)得到用户脸部图像与对应的虚拟眼镜叠加并显示,用户脸部转动时,虚拟眼镜配合转动,实现眼镜的跟随动作,实时展示用户佩戴眼镜的图像。
步骤14)和步骤15)具体为:
14)首先给出至少6个不同角度和位置下的虚拟眼镜的三维模型,并将这些三维模型分别叠加显示到采集的实时人脸图像中,通过调整人脸位置使虚拟眼镜与脸部位置匹配,通过主动外观模型算法计算获得此时人脸的脸型、位置及角度特征数据并保存,同时将所述位置及角度特征数据同虚拟眼镜在虚拟世界坐标系中的位置与旋转数据相对应,每个角度至少获得一对对应点,一个对应点为根据图像采集后计算出的人脸位置及角度信息,一个对应点为虚拟眼镜在虚拟世界坐标系中的位置及角度信息;
15)通过步骤14)至少6个不同角度和位置下的虚拟眼镜的配准,获得至少6个对应点,即至少六对对应位置和角度配准对,在此基础上按照单点动态匹配法及最小二乘法建立3×3的变换矩阵,所述变换矩阵中包含位置及旋转的转换数据。
进一步的,在准备阶段对人脸与虚拟眼镜进行配准时进行机器学习,重复进行步骤14)和15)对配准进行训练,每一次训练得到一个跟踪优化变换矩阵,对于跟踪优化变换矩阵与上一次执行步骤14)和15)得到的变换矩阵,求两个矩阵中每个元素的平均值,得到优化变换矩阵,经过至少2次以上的迭代训练,最终可得优化后的3×3变换矩阵。
步骤21)中,对于实时获得的包含用户脸部的图像,利用主动外观模型算法实时获得用户脸部形状特征,计算出脸部的位置及旋转数据,将所述旋转数据同变换矩阵相乘,将现实世界坐标系中眼镜应该显示的位置及旋转的角度变换到在虚拟世界坐标系中的对应位置和角度,最后将眼镜的三维虚拟模型放置在对应的位置并旋转到相应的角度,与用户脸部的图像完成配准。
在步骤2)的实时跟踪阶段中,用户在实时跟踪过程中随时暂停眼镜的跟随动作并记录暂停时脸部位置和角度信息,然后用户调整自身脸部的位置和角度以找到同暂停时眼镜最匹配的位置和角度,再通过主动外观模型算法对此时的人脸进行识别,并进行步骤14)和15),得到新的变换矩阵,用户再启动实时跟踪,此时根据新的变换矩阵实现实现眼镜的跟随动作,实时展示用户佩戴眼镜的图像,以此实现用户在使用中动态的优化跟踪的效果。
本发明提供了一种应用在人机交互领域的虚拟眼镜交互展示方法,不需要复杂的设备,通过准备阶段对人脸与眼镜进行配准,得到一个通用的配准变换矩阵,随后用户即可基于这一通用的配准变换矩阵实现实时的虚拟眼镜试戴操作。在此基础上,本发明对于变换矩阵还设置了机器学习的步骤,以增加变换矩阵的精度,另外,针对具体用户的个人体验,也提供了随时根据具体用户重新计算变换矩阵的设置,适应性强。
附图说明
图1为本发明的流程图。
图2为本发明的训练配准流程图。
图3为本发明用户在实时跟踪阶段中,暂停跟踪重新配准的流程图。
图4为本发明的装置示意图。
图5为本发明的实施示意图。
具体实施方式
本发明将最前沿的人脸识别技术同混合技术相结合,通过对人脸的实时采集、实时识别、实时定位,再将实时渲染的虚拟眼镜同人脸进行实时配准、实时跟踪,最终实现使用者可以随意更换虚拟的有真实感的眼镜,获得一种身临其境的眼镜试戴效果。其中,虚拟眼镜的款式可以根据需要进行随意的更换。
本发明通过设置图像采集装置201、混合现实应用服务器202和显示屏203,图像采集装置采集人脸图像,输入混合现实应用服务器中,混合现实应用服务器中预先存有虚拟眼镜的三维模型,将采集的人脸图像与眼镜的虚拟三维模型结合,经过识别计算得到人脸与眼镜配合的图像,在显示屏上进行显示,如图1,所述的图像采集装置包括一台或多台摄像机或摄像头。如图1和2,图像采集装置101进行实时视频采集,将采集后的数据传输至混合现实应用服务器202中,将实时渲染、实时跟踪的虚拟眼镜同人脸相结合。将包含虚拟眼镜和参与者人脸的混合现实实时视频展示在显示屏103,最终原本不佩戴眼镜的参与者104可以看到佩戴虚拟眼镜后的效果102。
下面具体说明本发明的实施。
本发明基于混合现实技术,将采集的现实中用户脸部图像与眼镜的三维虚拟模型叠加,并显示给用户,如图1,包括以下步骤:
1)准备阶段,对人脸与虚拟眼镜进行配准:
11)由图像采集装置采集包含人脸的图像;
12)利用主动外观模型算法对采集图像中的人脸进行识别,主动外观模型算法简称AAM算法,是在对训练数据进行统计分析的基础上,首先建立人脸模型,然后利用先验模型对图像中的目标物体进行匹配运算。它不仅利用形状信息,而且对重要的脸部纹理信息也进行统计分析,并利用找出形状与纹理之间的联系进行分析;
13)将人脸识别结果转换为对人脸的位置和旋转的六自由度信息;
14)根据步骤13)的识别结果,将虚拟眼镜与人脸位置进行配准;
15)通过至少六对对应位置和角度配准对,计算得到3×3变换矩阵,所述变换矩阵表示虚拟眼镜所处的虚拟世界坐标系与现实中的现实世界坐标系之间的变换映射关系;
2)实时跟踪阶段:
21)实时获得图像采集装置采集的包含用户脸部的图像,识别出用户脸部位置和角度信息,根据变换矩阵,对应实时变换眼镜三维虚拟模型的位置和角度;具体为:对于实时获得的包含用户脸部的图像,利用主动外观模型算法实时获得用户脸部形状特征,计算出脸部的位置及旋转数据,将所述旋转数据同变换矩阵相乘,将现实世界坐标系中眼镜应该显示的位置及旋转的角度变换到在虚拟世界坐标系中的对应位置和角度,最后将眼镜的三维虚拟模型放置在对应的位置并旋转到相应的角度,与用户脸部的图像完成配准;
22)将步骤21)得到用户脸部图像与对应的眼镜三维虚拟模型叠加并显示,用户脸部转动时,眼镜的三维虚拟模型配合转动,实时展示用户佩戴眼镜的图像。
其中,步骤14)和步骤15)具体为:
14)首先给出至少6个不同角度和位置下的虚拟眼镜的三维模型,并将这些三维模型分别叠加显示到采集的实时人脸图像中,通过调整人脸位置使虚拟眼镜与脸部位置匹配,通过主动外观模型算法计算获得此时人脸的脸型、位置及角度特征数据并保存,同时将所述位置及角度特征数据同虚拟眼镜在虚拟世界坐标系中的位置与旋转数据相对应,每个角度至少获得一对对应点,一个对应点为根据图像采集后计算出的人脸位置及角度信息,一个对应点为虚拟眼镜在虚拟世界坐标系中的位置及角度信息;
15)通过步骤14)至少6个不同角度和位置下的虚拟眼镜的配准,获得至少6个对应点,即至少六对对应位置和角度配准对,在此基础上按照单点动态匹配法及最小二乘法建立3×3的变换矩阵,所述变换矩阵中包含位置及旋转的转换数据。
进一步的,在准备阶段对人脸与眼镜进行配准时进行机器学习,如图2所示,重复进行步骤14)和15)对配准进行训练,每一次训练得到一个跟踪优化变换矩阵,对于跟踪优化变换矩阵上一次执行步骤14)和15)得到的变换矩阵,求两个矩阵中每个元素的平均值,即假设a11为第一个矩阵中第一行第一列的元素,b11为第二个矩阵中第一行第一列的元素,则c11为优化矩阵中第一行第一列的元素,且c11=(a11+b11)/2,其他元素数值以此类推,直至计算从c11计算至c33,完成整个3×3矩阵中9个元素的数值计算。经过至少2次重复步骤14)和15)后,不断迭代,最终可以获得优化后的3×3变换矩阵。
为了使具体用户在使用眼镜试戴时获得更适应自己的配准效果,特别提供用户在使用中动态优化跟踪的效果的功能。在步骤2)的实时跟踪阶段中,用户在实时跟踪过程中可以随时暂停眼镜的跟随动作并记录暂停时脸部位置和角度信息,然后用户调整自身脸部的位置和角度以找到同暂停时眼镜最匹配的位置和角度,再通过主动外观模型算法对此时的人脸进行识别,并重复进行步骤14)和15),得到新的变换矩阵,如图3所示。用户再启动实时跟踪,此时根据新的变换矩阵实现眼镜的跟随动作,实时展示用户佩戴眼镜的图像,如对显示效果不满意还可再次暂停重复上述过程,直至得到满意的显示效果。
本发明的方法中,通过分析可以发现变换矩阵中包含了图像采集模块中摄像头或摄像机的内参信息,这些信息在摄像头或摄像机为固定型号时变可转变为常数,不需要每次都进行配准计算。因此,通过同一摄像机获得不同用户的变换矩阵进行数值上的加权平均可以获得一个通用的配准变换矩阵,该矩阵的通用性随着更多的用户的变换矩阵参与加权平均可以获得更强的通用性,据此,本发明设计了通用配准矩阵计算的步骤。通用的配准变换矩阵建立后,配准模块中的配准次数可以从至少6次降低为至少1次,即只需要进行一次虚拟眼镜同人脸的位置和角度的匹配,即可以开始进行实时跟踪匹配。由上述可见,本发明的灵活度高,匹配性好,用户可以在通用的配准变换矩阵下直接选择各种虚拟眼镜进行佩戴,观看虚拟佩戴的效果;也可以就自己的脸型进行配准后,选择各种眼镜观看佩戴效果,并且在观看佩戴效果的过程中,还可随时调整眼镜在脸部的位置,实现动态优化。本发明应用广泛,有利于店铺销售至线上销售的转移,节省人力物力,由商家在后台提供混合现实服务器完成配准等数据处理工作,而用户只需要有摄像头和显示器通过网络连接到混合现实服务器即可,整个过程与用户实际选择佩戴眼镜相同,用户选择眼镜后,通过混合现实技术观看佩戴的效果,并可随时调整眼镜的佩戴位置,使得用户即使在线上销售中选择眼镜,也能获得与店铺销售同样的效果。即使是在店铺销售中使用本发明方法,也使得商家不用同时准备大量实体眼镜供客户挑选,节省成本。另外,眼镜的设计公司可以利用该技术,将已设计出、未上市的眼镜模型快速的发送到线上或线下商家,在获得客户的订单后在进行生产,可以极大的降低产品库存。

Claims (4)

1.基于人脸识别技术的混合显示眼镜交互展示方法,其特征是基于混合现实技术,将采集的现实中用户脸部图像与虚拟眼镜的三维模型叠加,并显示给用户,包括以下步骤:
1)准备阶段,对人脸与虚拟眼镜进行配准:
11)由图像采集装置采集包含人脸的图像;
12)利用主动外观模型算法对采集图像中的人脸进行识别;
13)将人脸识别结果转换为对人脸的位置和旋转的六自由度信息;
14)根据步骤13)的识别结果,将虚拟的眼镜模型与人脸位置进行配准:
首先给出至少6个不同角度和位置下的虚拟眼镜的三维模型,并将这些三维模型分别叠加显示到采集的实时人脸图像中,通过调整人脸位置使虚拟眼镜与脸部位置匹配,通过主动外观模型算法计算获得此时人脸的脸型、位置及角度特征数据并保存,同时将所述位置及角度特征数据同虚拟眼镜在虚拟世界坐标系中的位置与旋转数据相对应,每个角度至少获得一对对应点,一个对应点为根据图像采集后计算出的人脸位置及角度信息,一个对应点为虚拟眼镜在虚拟世界坐标系中的位置及角度信息;
15)通过至少六对对应位置和角度配准对,计算得到3×3变换矩阵,所述变换矩阵表示虚拟眼镜所处的虚拟世界坐标系与现实中的现实世界坐标系之间的变换映射关系,具体为:通过步骤14)至少6个不同角度和位置下的虚拟眼镜的配准,获得至少6个对应点,即至少六对对应位置和角度配准对,在此基础上按照单点动态匹配法及最小二乘法建立3×3的变换矩阵,所述变换矩阵中包含位置及旋转的转换数;
2)实时跟踪阶段,虚拟眼镜同人脸进行实时跟踪匹配:
21)实时获得图像采集装置采集的包含用户脸部的图像,识别出用户脸部位置和角度信息,根据变换矩阵,对应实时变换虚拟眼镜的位置和角度;
22)将步骤21)得到用户脸部图像与对应的虚拟眼镜叠加并显示,用户脸部转动时,虚拟眼镜配合转动,实现眼镜的跟随动作,实时展示用户佩戴眼镜的图像。
2.根据权利要求1所述的基于人脸识别技术的混合显示眼镜交互展示方法,其特征是在准备阶段对人脸与虚拟眼镜进行配准时进行机器学习,重复进行步骤14)和15)对配准进行训练,每一次训练得到一个跟踪优化变换矩阵,对于跟踪优化变换矩阵与上一次执行步骤14)和15)得到的变换矩阵,求两个矩阵中每个元素的平均值,得到优化变换矩阵,经过至少2次以上的迭代训练,最终可得优化后的3×3变换矩阵。
3.根据权利要求1或2所述的基于人脸识别技术的混合显示眼镜交互展示方法,其特征是步骤21)中,对于实时获得的包含用户脸部的图像,利用主动外观模型算法实时获得用户脸部形状特征,计算出脸部的位置及旋转数据,将所述旋转数据同变换矩阵相乘,将现实世界坐标系中眼镜应该显示的位置及旋转的角度变换到在虚拟世界坐标系中的对应位置和角度,最后将眼镜的三维虚拟模型放置在对应的位置并旋转到相应的角度,与用户脸部的图像完成配准。
4.根据权利要求3所述的基于人脸识别技术的混合显示眼镜交互展示方法,其特征是在步骤2)的实时跟踪阶段中,用户在实时跟踪过程中随时暂停眼镜的跟随动作并记录暂停时脸部位置和角度信息,然后用户调整自身脸部的位置和角度以找到同暂停时眼镜最匹配的位置和角度,再通过主动外观模型算法对此时的人脸进行识别,并进行步骤14)和15),得到新的变换矩阵,用户再启动实时跟踪,此时根据新的变换矩阵实现眼镜的跟随动作,实时展示用户佩戴眼镜的图像,以此实现用户在使用中动态的优化跟踪的效果。
CN201310330817.0A 2013-07-31 2013-07-31 基于人脸识别技术的混合显示眼镜交互展示方法 Active CN103400119B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310330817.0A CN103400119B (zh) 2013-07-31 2013-07-31 基于人脸识别技术的混合显示眼镜交互展示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310330817.0A CN103400119B (zh) 2013-07-31 2013-07-31 基于人脸识别技术的混合显示眼镜交互展示方法

Publications (2)

Publication Number Publication Date
CN103400119A CN103400119A (zh) 2013-11-20
CN103400119B true CN103400119B (zh) 2017-02-15

Family

ID=49563737

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310330817.0A Active CN103400119B (zh) 2013-07-31 2013-07-31 基于人脸识别技术的混合显示眼镜交互展示方法

Country Status (1)

Country Link
CN (1) CN103400119B (zh)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104217350B (zh) * 2014-06-17 2017-03-22 北京京东尚科信息技术有限公司 实现虚拟试戴的方法和装置
CN104299143A (zh) * 2014-10-20 2015-01-21 上海电机学院 虚拟试戴方法及装置
WO2016135078A1 (en) * 2015-02-23 2016-09-01 Fittingbox Process and method for real-time physically accurate and realistic-looking glasses try-on
GB2536060B (en) * 2015-03-06 2019-10-16 Specsavers Optical Group Ltd Virtual trying-on experience
CN104750933A (zh) * 2015-04-03 2015-07-01 福建省纳金网信息技术有限公司 一种基于互联网的眼镜试戴方法及系统
CN106303690A (zh) * 2015-05-27 2017-01-04 腾讯科技(深圳)有限公司 一种视频处理方法及装置
CN105139349A (zh) * 2015-08-03 2015-12-09 京东方科技集团股份有限公司 虚拟现实显示方法及系统
CN106909538A (zh) * 2015-12-21 2017-06-30 腾讯科技(北京)有限公司 使用效果展示方法及装置
CN105809507A (zh) * 2016-02-29 2016-07-27 北京酷配科技有限公司 一种虚拟试戴方法、虚拟试戴装置
CN106817568A (zh) * 2016-12-05 2017-06-09 网易(杭州)网络有限公司 一种增强现实显示方法和装置
CN107103513B (zh) * 2017-04-23 2020-12-29 广州帕克西软件开发有限公司 一种眼镜虚拟试戴方法
CN108319943B (zh) * 2018-04-25 2021-10-12 北京优创新港科技股份有限公司 一种提高戴眼镜条件下人脸识别模型性能的方法
CN109102533A (zh) * 2018-06-19 2018-12-28 黑龙江拓盟科技有限公司 一种基于混合现实的特征点定位方法
CN109241852B (zh) * 2018-08-10 2021-01-12 广州杰赛科技股份有限公司 具有附加特征的人脸识别方法、装置、计算机设备
WO2020056689A1 (zh) * 2018-09-20 2020-03-26 太平洋未来科技(深圳)有限公司 一种ar成像方法、装置及电子设备
CN111815382A (zh) * 2019-04-11 2020-10-23 苏州工其器智能科技有限公司 一种基于人脸识别技术的眼镜虚拟试戴方法
CN110533775B (zh) * 2019-09-18 2023-04-18 广州智美科技有限公司 一种基于3d人脸的眼镜匹配方法、装置及终端
CN111062328B (zh) * 2019-12-18 2023-10-03 中新智擎科技有限公司 一种图像处理方法、装置及智能机器人
CN112418138B (zh) * 2020-12-04 2022-08-19 兰州大学 一种眼镜试戴系统
CN116030224B (zh) * 2022-12-30 2023-12-26 广州市玄武无线科技股份有限公司 一种ar产品展示方法、装置、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101059871A (zh) * 2007-05-17 2007-10-24 谢亦玲 计算机配镜装置
CN101344971A (zh) * 2008-08-26 2009-01-14 陈玮 互联网三维人体头像眼镜试戴方法
CN101515330A (zh) * 2009-02-19 2009-08-26 上海交通大学 面向鉴别的图像相关特征融合识别系统
CN102376100A (zh) * 2010-08-20 2012-03-14 北京盛开互动科技有限公司 基于单张照片的人脸动画方法
CN102402691A (zh) * 2010-09-08 2012-04-04 中国科学院自动化研究所 一种对人脸姿态和动作进行跟踪的方法
CN102867321A (zh) * 2011-07-05 2013-01-09 艾迪讯科技股份有限公司 眼镜虚拟试戴互动服务系统与方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100050052A (ko) * 2008-11-05 2010-05-13 김영준 안경 가상 착용 방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101059871A (zh) * 2007-05-17 2007-10-24 谢亦玲 计算机配镜装置
CN101344971A (zh) * 2008-08-26 2009-01-14 陈玮 互联网三维人体头像眼镜试戴方法
CN101515330A (zh) * 2009-02-19 2009-08-26 上海交通大学 面向鉴别的图像相关特征融合识别系统
CN102376100A (zh) * 2010-08-20 2012-03-14 北京盛开互动科技有限公司 基于单张照片的人脸动画方法
CN102402691A (zh) * 2010-09-08 2012-04-04 中国科学院自动化研究所 一种对人脸姿态和动作进行跟踪的方法
CN102867321A (zh) * 2011-07-05 2013-01-09 艾迪讯科技股份有限公司 眼镜虚拟试戴互动服务系统与方法

Also Published As

Publication number Publication date
CN103400119A (zh) 2013-11-20

Similar Documents

Publication Publication Date Title
CN103400119B (zh) 基于人脸识别技术的混合显示眼镜交互展示方法
US20210177124A1 (en) Information processing apparatus, information processing method, and computer-readable storage medium
Memo et al. Head-mounted gesture controlled interface for human-computer interaction
CN105389539B (zh) 一种基于深度数据的三维手势姿态估计方法及系统
CN105391970B (zh) 提供由车辆的场景相机捕获的至少一个图像的方法和系统
CN106843460B (zh) 基于多摄像头的多目标位置捕获定位系统及方法
CN104978548A (zh) 一种基于三维主动形状模型的视线估计方法与装置
JP7015152B2 (ja) キーポイントデータに関する加工装置、方法及びプログラム
CN104346612B (zh) 信息处理装置和显示方法
CN104881526B (zh) 一种基于3d的物品穿戴方法及眼镜试戴方法
CN110544301A (zh) 一种三维人体动作重建系统、方法和动作训练系统
CN110363867A (zh) 虚拟装扮系统、方法、设备及介质
CN102622766A (zh) 多目标优化的多镜头人体运动跟踪方法
CN104899563A (zh) 一种二维人脸关键特征点定位方法及系统
CN110914873A (zh) 增强现实方法、装置、混合现实眼镜及存储介质
CN110717391A (zh) 一种基于视频图像的身高测量方法、系统、装置和介质
CN105760809A (zh) 用于头部姿态估计的方法和设备
CN113449570A (zh) 图像处理方法和装置
CN112330813A (zh) 一种基于单目深度摄像头的着装下三维人体模型重建方法
CN110110647A (zh) 基于ar设备进行信息显示的方法、装置及存储介质
CN110135277A (zh) 一种基于卷积神经网络的人体行为识别方法
CN108305321A (zh) 一种基于双目彩色成像系统的立体人手3d骨架模型实时重建方法和装置
CN106599811B (zh) 一种vr头显的面部表情追踪方法
CN113703583A (zh) 一种多模态交叉融合的虚拟影像融合系统、方法、装置
CN110223368A (zh) 一种基于深度学习的面部无标记运动捕捉方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
CB03 Change of inventor or designer information

Inventor after: Xu Jian

Inventor before: Li Jing

COR Change of bibliographic data
TA01 Transfer of patent application right

Effective date of registration: 20170109

Address after: Nanjing City, Jiangsu Province Road 210023 No. 99 Nanjing College of Information Technology

Applicant after: Xu Jian

Address before: Songshan Road, Jianye District of Nanjing City, Jiangsu province 210000 No. 129 building 7 1106 Wanda Washington Dongyuan

Applicant before: Nanjing Rongtu Chuangsi Information Technology Co., Ltd.

C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190517

Address after: 214000 China Sensor Network International Innovation Park E2-417, 200 Linghu Avenue, Taihu International Science Park, Xinwu District, Wuxi City, Jiangsu Province

Patentee after: Wuxi Rong domain Mdt InfoTech Ltd

Address before: 210023 Nanjing Institute of Information Technology, No. 99 Wenlan Road, Nanjing, Jiangsu Province

Patentee before: Xu Jian

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210407

Address after: 210012 1056, east of the first floor, building 106-2, software Avenue, Yuhuatai District, Nanjing City, Jiangsu Province

Patentee after: NANJING MIAOMI TECHNOLOGY Co.,Ltd.

Address before: 214000 China Sensor Network International Innovation Park E2-417, 200 Linghu Avenue, Taihu International Science Park, Xinwu District, Wuxi City, Jiangsu Province

Patentee before: Wuxi Rong domain Mdt InfoTech Ltd.