CN107784689A - 基于数据采集虚拟化身服务的运营方法、系统和采集设备 - Google Patents

基于数据采集虚拟化身服务的运营方法、系统和采集设备 Download PDF

Info

Publication number
CN107784689A
CN107784689A CN201710970075.6A CN201710970075A CN107784689A CN 107784689 A CN107784689 A CN 107784689A CN 201710970075 A CN201710970075 A CN 201710970075A CN 107784689 A CN107784689 A CN 107784689A
Authority
CN
China
Prior art keywords
user
terminal device
data
control platform
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710970075.6A
Other languages
English (en)
Inventor
唐修文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tang Yueshan
Original Assignee
Tang Yueshan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tang Yueshan filed Critical Tang Yueshan
Priority to CN201710970075.6A priority Critical patent/CN107784689A/zh
Publication of CN107784689A publication Critical patent/CN107784689A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种基于数据采集虚拟化身服务的运营方法,接收采集设备所采集的数据,并将数据上传至操控平台;当终端设备向操控平台发送化身重构请求与化身体验服务请求时,操控平台对终端设备的使用者进行化身重构操作以及服务请求的反馈结果推送操作。该方法能通过虚拟化身技术,可以提供超写实的虚拟试衣体验;可以提供用户体验良好的社交分享;可以提供用户深度参与感的游戏;可以为消费升级的各行各业提供数据接口,达到高度沉浸的用户体验。本发明还公开了一种基于数据采集虚拟化身服务的运营系统和采集设备。

Description

基于数据采集虚拟化身服务的运营方法、系统和采集设备
技术领域
本发明涉及智能设备技术领域,特别是涉及一种基于数据采集虚拟化身服务的运营方法、系统和采集设备。
背景技术
利用光场采集技术来构建化身,最早应用于好莱坞电影中。通过光场采集,重建与真人演员一致的虚拟化身作为数字演员,并应用于电影画面中的特效合成。在电影中的虚拟化身流程和技术,在数据处理环节需要多道艺术家手工把握的流程,导致整体流程复杂、主观,成本非常昂贵。由于上述这些因素限制了针对普通广大用户的大规模应用推广,只能应用于市场高度垂直的专业用户群体里面。
传统的虚拟化身技术,采集设备笨重,结构随意,稳定性弱,只是针对小众市场,没有大规模采集推广的基础。传统的数据处理流程需要大量人工干预,需要大量的艺术加工,处理的效果和效率极其不稳定,成本昂贵,不利于大规模的数据处理。由于缺乏针对普通用户人体采集的流程、服务和标准的建立,没有形成对接民用市场的产业链条,缺乏易用性。
发明内容
基于此,有必要针对传统技术存在的问题,提供一种基于数据采集虚拟化身服务的运营方法、系统和采集设备,能够解决传统技术中把人的形象以超写实写真的形式呈现出来,能以最亲切的用户体验把用户联系起来,能最大化的把用户粘合起来,形成社交流和信息流,最后在社交网络、电子商务、消费升级、娱乐游戏、教育展示等领域全面贡献持续价值,此外通过虚拟化身技术,可以提供超写实的虚拟试衣体验;可以提供用户体验良好的社交分享;可以提供用户深度参与感的游戏;可以为消费升级的各行各业提供数据接口,达到高度沉浸的用户体验。
第一方面,本发明实施例提供了一种基于数据采集虚拟化身服务的运营方法,所述方法包括:接收采集设备所采集的数据,并将所述数据上传至操控平台;当所述终端设备向所述操控平台发送化身重构请求与服务请求时,所述操控平台对所述终端设备的使用者进行化身重构操作以及所述服务请求的反馈结果推送操作。
在其中一个实施例中,所述终端设备,用于向所述操控平台发送多种请求,其中,所述多种请求包括:所述化身重构请求,所述服务请求,所述服务请求包括:采集服务请求、查询服务请求。
在其中一个实施例中,所述终端设备包括:用户输入模块,用户输出模块,用户发送模块和用户接收模块;其中,所述用户输入模块用于用户输入信息,所述用户输出模块用于向用户输出信息,所述用户发送模块用于用户向所述操控平台发送用户输入的多种信息,所述用户接收模块用于用户接收以及下载所述操控平台向用户发送的信息。
在其中一个实施例中,所述操控平台,用于接收针对所述终端设备的使用者进行输入的多种数据,并对接收的所述多种数据进行分析处理,以及根据所述终端设备的使用者发送的所述多种请求后将分析后的结果反馈至所述终端设备;其中,所述多种数据包括:所述终端设备使用者的注册信息与地理位置信息。
在其中一个实施例中,当所述终端设备向所述操控平台发送化身重构请求与服务请求时,所述操控平台对所述终端设备的使用者进行化身重构操作以及所述服务请求的反馈结果推送操作包括:通过预设算法计算所述终端设备采集图片的特征点,生成基于人体造型细节的密集点云,通过所述密集点云,生成点云模型;通过规则的结构分布对所述点云模型重新拓扑布线,生成拓扑模型;将所述拓扑模型与所述点云模型位置进行重合一致操作,设置贴图坐标,并将所述采集图片重新投影至所述拓扑模型上,获得映射贴图;对所述映射贴图进行处理,获得符合预设值的贴图使得符合超写实效果渲染需求。
在其中一个实施例中,还包括:获得所述拓扑模型后,设置人体骨骼,并建立起所述人体骨骼和所述拓扑模型的权重关系,生成虚拟角色;对生成的所述虚拟角色进行超写实画面级渲染操作。
第二方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面的基于数据采集虚拟化身服务的运营方法。
第三方面,本发明实施例提供了一种包含指令的计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述第一方面所述的方法。
第四方面,本发明实施例提供了一种基于数据采集的虚拟化身服务的运营系统,所述系统包括:终端设备,用于向操控平台发送多种请求,其中,所述多种请求包括:所述化身重构请求,所述服务请求,所述服务请求包括:采集服务请求、查询服务请求;采集设备,用于利用光场相机对所述终端设备的使用者进行数据采集,其中,所述利用光场相机对所述终端设备的使用者进行数据采集的操作为采集模块执行,所述采集设备进一步包括:传输模块,用于向操控平台发送所采集的数据;所述操控平台,用于接收采集设备发送的数据,并进行化身自动化生成处理,以及用于接收针对所述终端设备的使用者进行输入的多种数据,并对接收的所述多种数据进行分析处理,以及根据所述终端设备的使用者发送的所述多种请求后将分析后的结果反馈至所述终端设备。
在其中一个实施例中,所述采集设备被设置在固定场所进行采集或者所述采集设备被设置在移动的平台设备上进行采集。
第五方面,本发明实施例提供了一种采集设备,所述采集设备包括:采集模块,用于接收终端设备所采集的数据,其中,所述数据为人体图片;第一模型生成模块,用于通过预设算法计算所述终端设备采集图片的特征点,生成基于人体造型细节的密集点云,通过所述密集点云,生成点云模型;第二模型生成模块,用于通过规则的结构分布对所述点云模型重新拓扑布线,生成拓扑模型;映射贴图获取模块,用于将所述拓扑模型与所述点云模型位置进行重合一致操作,设置贴图坐标,并将所述采集图片重新投影至所述拓扑模型上,获得映射贴图;渲染处理模块,用于对所述映射贴图进行处理,获得符合预设值的贴图使得符合超写实效果渲染需求。
本发明提供的基于数据采集虚拟化身服务的运营方法、系统和采集设备,接收采集设备所采集的数据,并将数据上传至操控平台;当终端设备向操控平台发送化身重构请求与服务请求时,操控平台对终端设备的使用者进行化身重构操作以及服务请求的反馈结果推送操作。该方法能够解决传统技术中把人的形象以超写实写真的形式呈现出来,能以最亲切的用户体验把用户联系起来,能最大化的把用户粘合起来,形成社交流和信息流,最后在社交网络、电子商务、消费升级、娱乐游戏、教育展示等领域全面贡献持续价值,此外通过虚拟化身技术,可以提供超写实的虚拟试衣体验;可以提供用户体验良好的社交分享;可以提供用户深度参与感的游戏;可以为消费升级的各行各业提供数据接口,达到高度沉浸的用户体验。
附图说明
图1为本发明一个实施例中的一种基于数据采集虚拟化身服务的运营方法的流程示意图;
图2为本发明一个实施例中的一种基于数据采集虚拟化身服务的运营系统的结构示意图;
图3为本发明一个实施例中的一种基于数据采集虚拟化身服务的运营系统的结构示例图;
图4为本发明一个实施例中的一种采集设备的结构示意图;以及
图5为本发明一个实施例中的一种采集设备的结构示例图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例对本发明基于数据采集虚拟化身服务的运营方法、系统和采集设备进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
如图1所示,为一个实施例中的一种基于数据采集虚拟化身服务的运营方法的流程示意图。具体包括以下步骤:
步骤102,接收采集设备所采集的数据,并将数据上传至操控平台。
本实施例中,终端设备,用于向操控平台发送多种请求,其中,多种请求包括:化身重构请求,服务请求,服务请求包括:采集服务请求、查询服务请求。
进一步地,终端设备包括:用户输入模块,用户输出模块,用户发送模块和用户接收模块;其中,用户输入模块用于用户输入信息,用户输出模块用于向用户输出信息,用户发送模块用于用户向操控平台上传输入的多种信息,用户接收模块用于用户接收以及下载操控平台向用户发送的信息。
更进一步地,操控平台,用于接收针对终端设备的使用者进行输入的多种数据,并对接收的多种数据进行分析处理,以及根据终端设备的使用者发送的多种请求后将分析后的结果反馈至所述终端设备;其中,多种数据包括:终端设备使用者的注册信息与地理位置信息。
步骤104,当终端设备向操控平台发送化身重构请求与服务请求时,操控平台对终端设备的使用者进行化身重构操作以及服务请求的反馈结果推送操作。
本实施例中,当终端设备向操控平台发送化身重构请求与服务请求时,操控平台对终端设备的使用者进行化身重构操作以及服务请求的反馈结果推送操作包括:通过预设算法计算终端设备采集图片的特征点,生成基于人体造型细节的密集点云,通过密集点云,生成点云模型;通过规则的结构分布对点云模型重新拓扑布线,生成拓扑模型;将拓扑模型与点云模型位置进行重合一致操作,设置贴图坐标,并将采集图片重新投影至拓扑模型上,获得映射贴图;对映射贴图进行处理,获得符合预设值的贴图使得符合超写实效果渲染需求。
进一步地,本公开提出的一种基于数据采集虚拟化身服务的运营方法还包括:获得拓扑模型后,设置人体骨骼,并建立起人体骨骼和拓扑模型的权重关系,生成虚拟角色;对生成的虚拟角色进行超写实画面级渲染操作。
本发明提供的一种基于数据采集虚拟化身服务的运营方法,接收终端设备所采集的数据,并将数据上传至操控平台;当终端设备向操控平台发送化身重构请求与服务请求时,操控平台对终端设备的使用者进行化身重构操作以及服务请求的反馈结果推送操作。该方法能够解决传统技术中把人的形象以超写实写真的形式呈现出来,能以最亲切的用户体验把用户联系起来,能最大化的把用户粘合起来,形成社交流和信息流,最后在社交网络、电子商务、消费升级、娱乐游戏、教育展示等领域全面贡献持续价值,此外通过虚拟化身技术,可以提供超写实的虚拟试衣体验;可以提供用户体验良好的社交分享;可以提供用户深度参与感的游戏;可以为消费升级的各行各业提供数据接口,达到高度沉浸的用户体验。
基于同一发明构思,还提供了一种基于数据采集虚拟化身服务的运营系统。由于此系统解决问题的原理与前述一种基于数据采集虚拟化身服务的运营方法相似,因此,该系统的实施可以按照前述方法的具体步骤时限,重复之处不再赘述。
结合图2和图3,图2为一个实施例中的一种基于数据采集虚拟化身服务的运营系统的结构示意图,图3为一个实施例中的一种基于数据采集虚拟化身服务的运营系统的结构示例图。该基于数据采集虚拟化身服务的运营系统10包括:终端设备200、采集设备400和操控平台600。
其中,终端设备200用于向操控平台发送多种请求,其中,多种请求包括:化身重构请求,服务请求,服务请求包括:采集服务请求、查询服务请求;采集设备400用于利用光场相机对终端设备的使用者进行数据采集,其中,利用光场相机对终端设备的使用者进行数据采集的操作为采集模块执行,采集设备400进一步包括:传输模块,用于向操控平台发送所采集的数据;操控平台600用于接收采集设备发送的数据,并进行化身自动化生成处理,以及用于接收针对终端设备的使用者进行输入的多种数据,并对接收的多种数据进行分析处理,以及根据终端设备的使用者发送的多种请求后将分析后的结果反馈至终端设备。
本实施例中,采集设备400被设置在固定场所进行采集或者采集设备被设置在移动的平台设备上进行采集。
需要说明的是,关于控制光场相机采集数据;再通过预设算法计算终端设备采集图片的特征点,生成基于人体造型细节的密集点云,通过密集点云,生成点云模型;再次通过规则的结构分布对点云模型重新拓扑布线,生成拓扑模型;再次将拓扑模型与点云模型位置进行重合一致操作,设置贴图坐标,并将采集图片重新投影至所述拓扑模型上,获得映射贴图;最终对映射贴图进行处理,获得符合预设值的贴图使得符合超写实效果渲染需求。上述操作可以为采集设备端进行处理,也可以在操控平台600上进行处理。由此,提高了数据处理的灵活性,且在操控平台600上处理数据降低了费用成本。
需要进一步说明的是,采集设备的采集流程为用户来到采集中心,更衣,更换采集服装,整理仪表,站在设备前,TPOSE姿态,采集设备进行数据采集,采集设备上传采集数据到操控平台;操控平台在整个基于数据采集的虚拟化身运营方法种所完成的任务可以为接收采集设备的数据,自动化处理采集数,生成化身,接收用户请求,计算用户请求,反馈用户请求等;用户所使用终端设备主要集中在以下方面:首先注册用户信息;其次,发送采集请求,即在采集中心的时候,通过发送采集请求这机制,使得用户注册信息与采集数据建立数据库关系;再次,发送服务请求,即注册用户信息请求,化身生成请求,化身渲染请求,其他服务请求。
为了更清楚得理解与应用本公开提出的一种基于数据采集虚拟化身服务的运营系统,进行以下示例。需要说明的是,本公开所包含的范围不限于以下示例。
具体的,基于数据采集虚拟化身的运营系统,其特征包括用户终端、数据采集中心,运营业务管理平台。用户终端是用户自有的具备通讯功能的终端设备,用于向运营业务管理平台发送服务请求,并接受反馈结果;具体包括:用户输入模块,用户输出模块,用户发送模块和用户采集模块。
数据采集中心用于完成服务用户采集数据的整个流程,具体包括采集设备和服务流程所需的空间。它的安装位置可以是固定场所,也可以移动场所。关于其工作流程包括:用户的采集前准备工作,用户的采集中工作,用户采集后工作。
运营业务管理平台是用于收集,归档采集的数据,对采集的数据进行计算,接管和反馈用户信息,统筹和展示用户数据。
本发明的用户终端是用户自有的具备通讯功能的终端设备,用于向运营业务管理平台发送采集服务请求,指令和查询,并接收反馈信息;它包括:用户输入模块,用户输出模块,用户发送模块和用户接收模块。各模块是分立对接的或一体化集成,输入/输出模块可以与其他系统或设备对接;用户输入模块用于用户输入信息。用户输出模块用于向用户输出信息。用户发送模块用于用户向运营业务管理平台上传/提交信息。用户接收模块用于用户下载/接收运营业务管理平台向用户发送信息。
本发明的数据采集中心用于服务用户数据采集的全部流程;它包括采集服务前流程、采集服务中流程,采集服务后流程;采集服务前流程,它包括用户的信息注册,用户更衣,用户仪表整理;采集服务中流程,它包括用户进入采集设备,进行数据采集;采集服务后流程,它包括用户更衣复原,用户仪表整理;数据采集中心可以是固定的场所,它是把设备安装在固定场所里面进行采集;数据采集中心可以是移动的场所,它是把设备安装在移动的平台设备上进行采集。
本发明的运营业务管理平台用于接受用户注册信息,接受采集数据,对数据进行处理,根据用户需求反馈信息;接受用户注册信息,它包括用户在本服务中的身份验证;接受采集数据,它包括用户通过采集设备采集到的数据;对数据进行处理,包括一种基于数据采集虚拟化身服务的运营方法所描述的处理流程;根据用户需求反馈信息,它包括用户提交需求后,运营平台通过计算把结果通过用户终端反馈给用户。
本发明提供的一种基于数据采集虚拟化身服务的运营系统,接收终端设备所采集的数据,并将数据上传至操控平台;当终端设备向操控平台发送化身重构请求与服务请求时,操控平台对终端设备的使用者进行化身重构操作以及服务请求的反馈结果推送操作。该系统能够解决传统技术中把人的形象以超写实写真的形式呈现出来,能以最亲切的用户体验把用户联系起来,能最大化的把用户粘合起来,形成社交流和信息流,最后在社交网络、电子商务、消费升级、娱乐游戏、教育展示等领域全面贡献持续价值,此外通过虚拟化身技术,可以提供超写实的虚拟试衣体验;可以提供用户体验良好的社交分享;可以提供用户深度参与感的游戏;可以为消费升级的各行各业提供数据接口,达到高度沉浸的用户体验。
如图4所示,本公开还提供了一种采集设备20,采集设备包括:采集模块210、第一模型生成模块220、第二模型生成模块230、映射贴图获取模块240和渲染处理模块250。
其中,采集模块,用于接收终端设备所采集的数据,其中,数据为人体图片;第一模型生成模块,用于通过预设算法计算终端设备采集图片的特征点,生成基于人体造型细节的密集点云,通过密集点云,生成点云模型;第二模型生成模块,用于通过规则的结构分布对点云模型重新拓扑布线,生成拓扑模型;映射贴图获取模块,用于将拓扑模型与点云模型位置进行重合一致操作,设置贴图坐标,并将采集图片重新投影至拓扑模型上,获得映射贴图;渲染处理模块,用于对映射贴图进行处理,获得符合预设值的贴图使得符合超写实效果渲染需求。
需要说明的是,采集设备的智能属性可以通过以下模块的协同操作完成。具体的,智能身高匹配模块,用于智能检测用户身高,操控智能升级机自动匹配当前用户身高,实现精准光场采集;智能姿态检测模块,用于智能检测用户姿态是否符合要求,对姿态的质量进行评估并提示,其中,质量评估包括:脚和肩膀同宽检测、直立检测、驼背检测、抬头平视检测、手臂平举检测,提示包括显示界面提示,语言提示;智能数据检测模块,用于智能的对采集到的数据质量进行分析检测,评估是否成功,评估不过做出重拍建议,其中,质量检测包括:数据的完整性检测、对焦效果检测、曝光质量检测,即欠曝,过曝评估、运动模糊检测、是否闭眼检测。
为了更加清楚地理解与应用本公开提出的一种采集设备,现对采集设备的工作原理进行详述。
如图5所示,具体的,数据采集是指利用光学采集光场的方式来采集人的身体尺寸数据。这种采集方式能采集人身体的精确几何结构、精确的皮肤纹理质感,具有对人体无害、效率很高的特点。
通过对上述采集得到的数据经过模型构建、重新拓扑、贴图构建、自动绑定、超写实渲染等一系列技术体系的处理,可以创建一个在形态、外貌等能接近真实本人的虚拟化身角色。模型构建:就是通过算法计算采集图片的特征点,生成能体现造型细节的密集点云,通过密集点云,生成点云模型。重新拓扑:获得的点云模型密度很高,不规则,数据量巨大,无法直接应用于后续制作中,通过规则的结构分布对点云模型重新拓扑布线,生成拓扑模型。贴图构建:获得拓扑模型后,把拓扑模型和点云模型位置重合一致,设置好贴图坐标,把采集的照片重新投影到拓扑模型上,获得映射贴图,对映射贴图进行处理获得合格贴图,用于配合超写实效果渲染。自动绑定:获得拓扑模型后,设置骨骼,并建立起骨骼和模型的权重关系,生成虚拟角色。超写实渲染:对生成的虚拟角色进行影视级的超写实画面渲染。
综上所述可知,本公开提出的一种基于数据采集虚拟化身服务的运营方法、系统以及采集设备,分别依托基于人工智能的自动化处理流程,精准灵活的光场模拟软件,以及精巧智能的采集设备设计。其中,采集设备的设计用到了光场模拟软件。
需要说明的是,基于人工智能的自动化处理流程为创新的自动化数据处理流程,通过采用多种预设算法,并整合了基于深度学习的人工智能技术和能处理海量大数据的云计算的基础技术。此外,针对精确灵活的光场模拟程序需要说明的是,所谓光场就是拍照相机能清晰成像的区域,也就是景深范围内的区域,在几何上是个四棱台。可以理解的是,采集设备可以模拟采集相机光场的总体分布,模拟采集相机的可视区域,模拟采集相机光场的有效区域实现精确的光场分布模拟。另外,可以模拟不同性别的人体。(如:男人、女人);模拟不同身高的人体。(从60cm的小孩,到190cm的成年人);模拟不同身材的人体。(瘦弱的,精壮的,强壮的,啤酒肚,肥胖的等);模拟不同的采集动作(从手侧放到平放),达到精巧的人体形态模拟目的。
更进一步地,针对采集设备,光场相机的视场角较小,对焦距离很短,有效景深较浅,导致有效的光场资源紧张,又因为采集用户的体型差异较大,不同身高差的原因,给大规模的数据采集造成困难。通过精巧的人体姿态设置和灵活的十字中心点对齐技术,能平衡上述矛盾,为海量用户的快速数据采集提供保障。精巧的采集姿势,TPose姿势是人体体型最舒展状态,能完美展示人体姿态的各个细节,本采集流程要求用户处于TPose姿态进行采集。设置体型标准的人体模特作为参考(身材健美,身高1.9m的成年男子)。根据参考的标准人体模特TPose姿态所形成的十字区域进行光场相机分布。为了配合采集人体TPose姿势的形态特性,采集设备的结构采用方形的结构布置光场相机安装。
可以理解的是,通过智能的传感器技术,能提前感知用户的身高信息,驱动智能升降机升级到合适高度;当采集用户站立于升级机上摆放TPose姿势时,当前用户的头顶点刚好与标准人体头顶点重合,使得不同身高用户可以精准的匹配光场,并进行数据采集。
本发明实施例还提供了一种计算机可读存储介质。该计算机可读存储介质上存储有计算机程序,该程序被图1中处理器执行。
本发明实施例还提供了一种包含指令的计算机程序产品。当该计算机程序产品在计算机上运行时,使得计算机执行上述图1的方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种基于数据采集虚拟化身服务的运营方法,所述方法包括:
接收采集设备所采集的数据,并将所述数据上传至操控平台;
当所述终端设备向所述操控平台发送化身重构请求与化身体验服务请求时,所述操控平台对所述终端设备的使用者进行化身重构操作以及所述服务请求的反馈结果推送操作。
2.根据权利要求1所述的方法,其中,所述终端设备,用于向所述操控平台发送多种请求,其中,所述多种请求包括:所述化身重构请求,所述服务请求,所述服务请求包括:采集服务请求、查询服务请求、体验化身服务请求。
3.根据权利要求1或2所述的方法,其中,所述终端设备包括:用户输入模块,用户输出模块,用户发送模块和用户接收模块;
其中,所述用户输入模块用于用户输入信息,所述用户输出模块用于向用户输出信息,所述用户发送模块用于用户向所述操控平台上传采集到的多种信息,所述用户接收模块用于用户接收以及下载所述操控平台向用户发送的信息。
4.根据权利要求1所述的方法,其中,所述操控平台,用于接收针对所述终端设备的使用者进行输入的多种数据,并对接收的所述多种数据进行分析处理,以及根据所述终端设备的使用者发送的所述多种请求后将分析后的结果反馈至所述终端设备;
其中,所述多种数据包括:所述终端设备使用者的注册信息与地理位置信息。
5.根据权利要求1所述的方法,其中,当所述终端设备向所述操控平台发送化身重构请求与服务请求时,所述操控平台对所述终端设备的使用者进行化身重构操作以及所述服务请求的反馈结果推送操作包括:通过预设算法计算所述终端设备采集图片的特征点,生成基于人体造型细节的密集点云,通过所述密集点云,生成点云模型;
通过规则的结构分布对所述点云模型重新拓扑布线,生成拓扑模型;
将所述拓扑模型与所述点云模型位置进行重合一致操作,设置贴图坐标,并将所述采集图片重新投影至所述拓扑模型上,获得映射贴图;
对所述映射贴图进行处理,获得符合预设值的贴图使得符合超写实效果渲染需求。
6.根据权利要求5所述的方法,还包括:获得所述拓扑模型后,设置人体骨骼,并建立起所述人体骨骼和所述拓扑模型的权重关系,生成虚拟角色;
对生成的所述虚拟角色进行超写实画面级渲染操作。
7.一种计算机可读存储介质,其中,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-6任一项所述的方法。
8.一种基于数据采集的虚拟化身服务的运营系统,所述系统包括:
终端设备,一种用户自有的具有通讯功能的终端设备,用于向操控平台发送多种请求,其中,所述多种请求包括:所述化身重构请求,所述服务请求,所述服务请求包括:注册用户信息、采集服务请求、查询服务请求、体验化身请求;
采集设备,用于利用光场相机对所述终端设备的使用者进行数据采集,其中,所述利用光场相机对所述终端设备的使用者进行数据采集的操作为采集模块执行,所述采集设备进一步包括:传输模块,用于向操控平台发送所采集的数据;
所述操控平台,用于接收采集设备发送的数据,并进行化身自动化生成处理,以及用于接收针对所述终端设备的使用者进行输入的多种数据,并对接收的所述多种数据进行分析处理,以及根据所述终端设备的使用者发送的所述多种请求后将分析后的结果反馈至所述终端设备。
9.根据权利要求8所述的系统,其中,所述采集设备被设置在固定场所进行采集或者所述采集设备被设置在移动的平台设备上进行采集。
10.一种采集设备,所述采集设备包括:
采集模块,用于控制光场相机采集数据,其中,所述数据为人体照片;
第一模型生成模块,用于通过预设算法计算所述终端设备采集图片的特征点,生成基于人体造型细节的密集点云,通过所述密集点云,生成点云模型;
第二模型生成模块,用于通过规则的结构分布对所述点云模型重新拓扑布线,生成拓扑模型;
映射贴图获取模块,用于将所述拓扑模型与所述点云模型位置进行重合一致操作,设置贴图坐标,并将所述采集图片重新投影至所述拓扑模型上,获得映射贴图;
渲染处理模块,用于对所述映射贴图进行处理,获得符合预设值的贴图使得符合超写实效果渲染需求。
CN201710970075.6A 2017-10-18 2017-10-18 基于数据采集虚拟化身服务的运营方法、系统和采集设备 Pending CN107784689A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710970075.6A CN107784689A (zh) 2017-10-18 2017-10-18 基于数据采集虚拟化身服务的运营方法、系统和采集设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710970075.6A CN107784689A (zh) 2017-10-18 2017-10-18 基于数据采集虚拟化身服务的运营方法、系统和采集设备

Publications (1)

Publication Number Publication Date
CN107784689A true CN107784689A (zh) 2018-03-09

Family

ID=61434551

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710970075.6A Pending CN107784689A (zh) 2017-10-18 2017-10-18 基于数据采集虚拟化身服务的运营方法、系统和采集设备

Country Status (1)

Country Link
CN (1) CN107784689A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101278280A (zh) * 2005-09-30 2008-10-01 Skc&C有限公司 展示用户创建的数字时装的数字影集业务系统及操作该系统的方法
CN105327509A (zh) * 2008-06-02 2016-02-17 耐克创新有限合伙公司 创建化身的系统和方法
CN105493146A (zh) * 2013-05-13 2016-04-13 姆波特有限公司 用于实现用户独自测定身体尺寸和身材信息和在网络环境中利用此类信息的装置、框架以及方法
US20160240015A1 (en) * 2015-02-13 2016-08-18 Speed 3D Inc. Three-dimensional avatar generating system, device and method thereof
CN106023288A (zh) * 2016-05-18 2016-10-12 浙江大学 一种基于图像的动态替身构造方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101278280A (zh) * 2005-09-30 2008-10-01 Skc&C有限公司 展示用户创建的数字时装的数字影集业务系统及操作该系统的方法
CN105327509A (zh) * 2008-06-02 2016-02-17 耐克创新有限合伙公司 创建化身的系统和方法
CN105493146A (zh) * 2013-05-13 2016-04-13 姆波特有限公司 用于实现用户独自测定身体尺寸和身材信息和在网络环境中利用此类信息的装置、框架以及方法
US20160240015A1 (en) * 2015-02-13 2016-08-18 Speed 3D Inc. Three-dimensional avatar generating system, device and method thereof
CN106023288A (zh) * 2016-05-18 2016-10-12 浙江大学 一种基于图像的动态替身构造方法

Similar Documents

Publication Publication Date Title
CN110599605B (zh) 图像处理方法及装置、电子设备和计算机可读存储介质
US11164145B2 (en) Apparatus and method of identifying and sizing clothing in an inventory management system
EP3815398B1 (en) Multi-sync ensemble model for device localization
JP7125992B2 (ja) 現実世界の仮想現実マップを用いた仮想現実(vr)ゲーム環境の構築
KR102290040B1 (ko) 신체 이미징
US11256958B1 (en) Training with simulated images
US11250321B2 (en) Immersive feedback loop for improving AI
CN110458924A (zh) 一种三维脸部模型建立方法、装置和电子设备
CN107784689A (zh) 基于数据采集虚拟化身服务的运营方法、系统和采集设备
CN105957139A (zh) 一种增强现实三维模型的生成方法
Sawiros et al. Next-gen e-commerce in the metavers
Latham et al. A case study on the advantages of 3D walkthroughs over photo stitching techniques
Bardis et al. WebGL enabled smart avatar warping for body weight animated evolution
CN116012564B (zh) 一种三维模型与实景照片智能融合的设备与方法
Mutalib et al. PRO-VAS: utilizing AR and VSLAM for mobile apps development in visualizing objects
Chung et al. Optimizing camera setup for in-home first-person rendering mixed reality gaming system
Wang Capturing Worlds of Play: A Framework for Educational Multiplayer Mixed Reality Simulations
US20240020920A1 (en) Incremental scanning for custom landmarkers
Coviello Location-based augmented reality visualization of 3D models using a mobile application–izanagiXR
CN105749552A (zh) 一种进行ar卡游戏的方法
MOHD RAZALI DENTAL AUGMENTED REALITY–AUGMENTED REALITY (AR) BASED ON DEEP LEARNING FOR DENTAL EDUCATION
Zhang A QoE Model to Evaluate Semi-Transparent Augmented-Reality System
Chen et al. An Application of Somatosensory Interaction for 3D Virtual Experiments
Alva et al. Augmented Reality Visualization of Menu Items using Image Reconstruction
Malathi et al. Cost Efficient Virtual Trial Rooms

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180309

RJ01 Rejection of invention patent application after publication