CN105741343A - 一种信息处理方法及电子设备 - Google Patents

一种信息处理方法及电子设备 Download PDF

Info

Publication number
CN105741343A
CN105741343A CN201610059916.3A CN201610059916A CN105741343A CN 105741343 A CN105741343 A CN 105741343A CN 201610059916 A CN201610059916 A CN 201610059916A CN 105741343 A CN105741343 A CN 105741343A
Authority
CN
China
Prior art keywords
model
illumination
threedimensional model
scene image
real scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610059916.3A
Other languages
English (en)
Inventor
许枫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201610059916.3A priority Critical patent/CN105741343A/zh
Publication of CN105741343A publication Critical patent/CN105741343A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/50Lighting effects
    • G06T15/506Illumination models

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)

Abstract

本发明公开了一种信息处理方法及电子设备,所述方法包括:获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;基于所述第一实景图像及所述第一三维模型生成第一画面。用于解决现有技术中的电子设备存在基于AR技术显示的三维模型的视觉效果差的技术问题,实现增加基于AR技术显示的三维模型与实际场景的融合度的技术效果。

Description

一种信息处理方法及电子设备
技术领域
本发明涉及电子技术领域,特别涉及一种信息处理方法及电子设备。
背景技术
随着科学技术的不断发展,电子设备也得到了飞速的发展,许多电子设备,如笔记本电脑、平板电脑等,成为了人们日常生活的必需品。为了提高用户的视觉体验,电子设备中采用一种增强现实技术(AugmentedReality,AR),通过模拟仿真,将虚拟的信息与真实世界中的信息进行补充、叠加,进而同时将虚拟信息和真实信息同时显示在同一画面中,带来了一种新的感官体验。
在现有技术中,采用AR技术将虚拟信息与真实信息显示在同一画面中时,如将一个杯子的三维模型与当前摄像头中的拍摄画面进行增强显示,则电子设备会读取一个预先设计好的杯子的obj文件(3D模型文件格式),然后生成相应的三维模型,并通过AR技术将生成的人物三维模型和当前的拍摄画面合成在拍摄画面中显示出来。
由于现有技术中的电子设备在基于AR技术显示的三维模型是预先设定好的,因此,三维模型的光照点和光照强度都已经固定,不会发生变化,如设定三维模型的光照点在三维模型的左边,那么当现场实际场景里的光源位于三维模型的右边时,三维模型的光照点便与实际场景的光照不符合,从而使整个AR画面不真实,给用户带来不好的视觉效果。所以,现有技术中的电子设备存在基于AR技术显示的三维模型的视觉效果差的技术问题。
发明内容
本申请实施例提供一种信息处理方法及电子设备,用于解决现有技术中的电子设备存在基于AR技术显示的三维模型的视觉效果差的技术问题,实现增加基于AR技术显示的三维模型与实际场景的融合度的技术效果。
本申请实施例一方面提供了一种信息处理方法,包括:
获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
基于所述第一实景图像及所述第一三维模型生成第一画面。
可选的,所述基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型,包括:
获取所述第一对象的预设光照反射模型;
基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,在所述光照参数为光源点位置时,所述基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型,包括:
基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,在所述光照参数为光照强度值时,所述基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型,包括:
获取所述第一对象的颜色值;
基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,所述基于所述第一实景图像及所述第一三维模型生成第一画面,包括:
基于所述第一三维模型生成所述第一对象的第一三维图像;
将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
本申请实施例另一方面提供一种电子设备,包括:
第一获取单元,用于获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
第一执行单元,用于获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
第二执行单元,用于基于所述第一实景图像及所述第一三维模型生成第一画面。
本申请实施例还提供一种电子设备,包括:
壳体;
图像采集装置,设置在所述壳体内,用于获取第一实景图像;
传感器,设置在所述壳体内,用于获取光照参数;
处理器,设置在所述壳体内,用于获取所述第一实景图像中的第一对象对应的预设虚拟三维模型;基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;基于所述第一实景图像及所述第一三维模型生成第一画面。
可选的,所述处理器具体用于:
获取所述第一对象的预设光照反射模型;
基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,所述处理器具体用于:
基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,所述处理器具体用于:
获取所述第一对象的颜色值;
基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,所述处理器具体用于:
基于所述第一三维模型生成所述第一对象的第一三维图像;
将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
本申请实施例中的上述一个或多个技术方案,至少具有如下一种或多种技术效果:
一、由于本申请实施例中的技术方案,采用获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;基于所述第一实景图像及所述第一三维模型生成第一画面的技术手段,这样,通过实时获取现实场景中的光照参数来生成满足光照条件的第一对象的三维模型,然后利用AR技术将实时生成的三维模型与实景图像结合起来,形成AR画面。从而使AR画面中的三维模型能够根据实时获取的光照参数而发生变化,增加了三维模型与现实场景的融合度,给用户带来了更加真实的视觉效果,所以,有效解决了现有技术中的电子设备存在基于AR技术显示的三维模型的视觉效果差的技术问题,实现增加基于AR技术显示的三维模型与实际场景的融合度的技术效果。
二、由于本申请实施例中的技术方案,采用基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型以及获取所述第一对象的颜色值;基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型的技术手段,这样,电子设备可以根据获取的光源点位置及光照强度值对三维模型的光照效果进行调整,当光源点位置或者光照强度值发生变化时,三维模型的光照效果也会相应地发生变化,从而实现了AR画面中的三维模型的光照效果能够根据实时光照参数而发生改变的技术效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例。
图1为本申请实施例一中提供的一种信息处理方法的流程图;
图2为本申请实施例一中生成第一三维模型的具体实现方式流程图;
图3为本申请实施例一中步骤S202的第一种具体实现方式流程图;
图4A为本申请实施例一中步骤S202的第一种具体实现方式中顶点的起始位置示意图;
图4B为本申请实施例一中步骤S202的第一种具体实现方式中顶点移动后的位置示意图;
图5为本申请实施例一中步骤S202的第二种具体实现方式流程图;
图6为本申请实施例一中步骤S103的具体实现方式流程图;
图7为本申请实施例二中提供的一种电子设备的结构框图;
图8为本申请实施例三中提供的一种电子设备的结构示意图。
具体实施方式
本申请实施例提供一种信息处理方法及电子设备,用于解决现有技术中的电子设备存在基于AR技术显示的三维模型的视觉效果差的技术问题,实现增加基于AR技术显示的三维模型与实际场景的融合度的技术效果。
本申请实施例中的技术方案为解决上述的技术问题,总体思路如下:
一种信息处理方法,包括:
获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
基于所述第一实景图像及所述第一三维模型生成第一画面。
在上述技术方案中,采用获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;基于所述第一实景图像及所述第一三维模型生成第一画面的技术手段,这样,通过实时获取现实场景中的光照参数来生成满足光照条件的第一对象的三维模型,然后利用AR技术将实时生成的三维模型与实景图像结合起来,形成AR画面。从而使AR画面中的三维模型能够根据实时获取的光照参数而发生变化,增加了三维模型与现实场景的融合度,给用户带来了更加真实的视觉效果,所以,有效解决了现有技术中的电子设备存在基于AR技术显示的三维模型的视觉效果差的技术问题,实现增加基于AR技术显示的三维模型与实际场景的融合度的技术效果。
为了更好的理解上述技术方案,下面通过附图以及具体实施例对本发明技术方案做详细的说明,应当理解本申请实施例以及实施例中的具体特征是对本发明技术方案的详细的说明,而不是对本发明技术方案的限定,在不冲突的情况下,本申请实施例以及实施例中的技术特征可以相互结合。
实施例一
请参考图1,为本申请实施例一中提供的一种信息处理方法的流程图,所述方法包括:
S101:获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
S102:获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
S103:基于所述第一实景图像及所述第一三维模型生成第一画面。
在具体实施过程中,所述信息处理方法具体可以应用在笔记本电脑、智能手机、智能眼镜中,也可以应用在其他的能够实现AR技术的电子设备中,在此,就不一一举例了。在本申请实施例中,将以所述信息处理方法应用在笔记本电脑中为例,来对本申请实施例中的方法进行详细的描述。
在采用本申请实施例中的技术方案进行信息处理时,首先执行步骤S101,即:获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型。
在具体实施过程中,以所述信息处理方法应用在笔记本电脑中为例,当采用本申请实施例中的方法生成AR画面时,首先,笔记本电脑通过摄像头获取当前环境中的实景图像,然后,笔记本电脑从获取的实景图像中确定出需要进行三维显示的第一对象,如实景图像中的人物、实景图像中的物品等,具体来讲,可以是在笔记本电脑的存储单元中预先存储一些特定对象的三维模型,如小男孩儿的三维模型、中年妇女的三维模型、杯子的三维模型,当笔记本电脑获取当前实景图像后,便对实景图像中的对象进行判断,确定实景图像中是否包含有上述预设的特定对象,如实景图像中包含有一个杯子,则笔记本电脑便从预存的三维模型中与杯子对应的三维模型;也可以是当笔记本电脑获取实景图像后,识别出实景图像中的所有可识别对象,然后根据每个识别出的对象的形状、颜色、纹理等,生成初始三维模型,初始三维模型中不包含光照效果,或者光照效果为默认值。当然,本领域技术人员也可以采用其他方式获取预设虚拟三维模型,在本申请实施例中不作限制。
在本申请实施例中,将以第一对象为实景图像中的杯子、所述预设虚拟三维模型为根据实景图像中的杯子的形状、颜色、纹理等生成的光照效果为默认值的初始三维模型为例,来对本申请实施例中的后续步骤进行详细描述。
在执行完成步骤S101之后,本申请实施例中的方法便执行步骤S102,即:获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型。
在具体实施过程中,沿用上述例子,当笔记本电脑获取实景图像及杯子的预设三维模型后,笔记本电脑的传感器便获取当前环境的光照参数,如,传感器可以是光敏传感器,通过光敏传感器获取当前环境中的光线强度值,如光线强度值为0.5nit,同时通过光敏传感器与摄像头的结合,确定出光源点位置;传感器也可以是RGB传感器,直接通过RGB传感器获得光线强度值及光源点位置。当然,本领域技术人员也可以根据实际使用需要通过其他的传感器或者其他的功能模块获取相应的光照参数值,在本申请实施例中不作限制。
当笔记本电脑获取当前环境中的光照参数后,便基于光照参数及获取的杯子的预设三维模型,生成符合光照参数的第一三维模型。
在本申请实施例中,请参考图2,所述基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型,包括:
S201:获取所述第一对象的预设光照反射模型;
S202:基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在具体实施过程中,沿用上述例子,在笔记本电脑生成符合光照参数的第一三维模型时,首先要执行步骤S201,获取光照反射模型。具体的可以在笔记本电脑中预先存储多个预设光照反射模型,如漫反射模型、镜面反射模型等,笔记本电脑根据当前环境中光照参数值进行选择,如确定光源点位置与第一对象之间的距离,当距离小于一预设阈值时,则确定使用镜面反射模型;或者,当光照强度值小于一预设阈值时,则确定使用漫反射模型,当然,本领域技术人员可以根据实际使用需求选择不同光照反射模型,在本申请中不作限制。
在执行完成步骤201之后,本申请实施例中的方法便执行步骤S202,具体有如下两种实现方式:
第一种方式,在所述光照参数为光源点位置时,请参考图3,步骤S202包括:
S301:基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
S302:基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在具体实施过程中,沿用上述例子,当笔记本电脑获取预设光照反射模型后,便基于光源点位置对预设光照反射模型进行调整。若预设光照反射模型中的顶点位置为模型的正上方,如图4A所示,以模型中心为原点,建立三维坐标系,确定出当前初始顶点位置为(0、0、2);笔记本电脑确定出光源点位置为杯子的左上方,则根据光线传播方向,确定出此时光照反射模型的顶点为与光线传播方向相交的位置,如图4B所示,确定出调整后的顶点位置为(1、1、1),从而确定出预设光照反射模型的调整向量为v=(1-0、1-0、1-2)=(1、1、-1),然后,笔记本电脑便将预设光照反射模型中每个点移动向量v,从而获得调整后的光照反射模型。然后用与调整后的光照反射模型对应的渲染数据更新预设虚拟三维模型的光照渲染数据,运行更新后的三维模型渲染数据,从而获得了满足当前环境光照参数的第一三维模型。这样,当场景中的光源点位于第一对象的左边时,虚拟三维模型中的最亮点位于模型的左部;当场景中的光源点位于第一对象的右边时,虚拟三维模型中的最亮点位于模型的右部,从而使虚拟三维模型的光照效果会根据场景中的光源点位置发生改变。
第二种方式,在所述光照参数为光照强度值时,请参考图5,步骤S202包括:
S501:获取所述第一对象的颜色值;
S502:基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
S503:基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在具体实施过程中,沿用上述例子,当笔记本电脑获取预设光照模型后,便获取实景图像中杯子的颜色值,如(124、205、124),然后基于当前环境的光照强度值及杯子的颜色值确定光照反射模型中每个点的颜色值。具体的,可以在笔记本电脑中存储有光照强度值与起始颜色值的对应关系,如当光照强度值为0nit~2nit之间时,将获取的第一对象的颜色值作为起始颜色值;当光照强度值为2nit~4nit之间时,将获取的第一对象的颜色值增加30后作为起始颜色值。由于当前环境中的光线强度值为0.5nit,因此,光照反射模型中的起始颜色值为(124、205、124)。设定在获取的预设光照反射模型中,起始颜色值为模型中部位置对应的颜色值,且每向顶点靠近一预设距离值便将起始值增加20作为该点的颜色值,每向顶点远离2mm便将起始值减小20作为该点的颜色值,则笔记本电脑根据预设光照反射模型中的颜色值变化规律,计算出预设光照反射模型中每个点的颜色值,如,预设光照反射模型中部位置的颜色值为(124、205、124),向靠近顶点方向距离中部位置4mm处的颜色值为(164、245、164),以此类推,当笔记本电脑计算完预设光照反射模型中的所有点的颜色值时,便获得了经调整的光照反射模型。然后用与调整后的光照反射模型对应的渲染数据更新预设虚拟三维模型的光照渲染数据,运行更新后的三维模型渲染数据,从而获得了满足当前环境光照参数的第一三维模型。这样,当光照强度较大时,虚拟三维模型的颜色比实物稍浅;当光照强度较小时,虚拟三维模型的颜色则比实物稍深,从而使虚拟三维模型的光照效果会随着场景中光照强度值发生改变。
在执行完成步骤S102之后,本申请实施例中的方法便执行步骤S103,即:基于所述第一实景图像及所述第一三维模型生成第一画面。
在本申请实施例中,请参考图6,步骤S103包括:
S601:基于所述第一三维模型生成所述第一对象的第一三维图像;
S602:将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
在具体实施过程中,沿用上述例子,当笔记本电脑获取杯子的第一三维模型后,便确定与实景图像相对应的第一视角,如,在实景图像中杯子的视角为杯柄在杯身的右边,从而,笔记本电脑通过第一三维模型获取与杯柄在杯身右边的视角对应的第一三维图像,然后采用AR技术,用第一三维图像替换实景图像中的第一对象,生成具有三维图像的AR画面。
在具体实施过程中,也可以是当笔记本电脑获取杯子在实景图像中的视角为杯柄在杯身的右边后,在该视角上对杯子的第一三维模型做转换,获取杯子在该视角上的二维图像,如,以杯柄在杯身右边的视角对第一三维模型进行投影,获取在该视角上的二维投影图像,然后,以获取的杯子的二维投影图像替换实景图像中的杯子,合成二维画面。
当然,本领域技术人员也可以采用其他方式将第一三维模型与实景图像进行融合,在本申请实施例中不作限制。
实施例二
基于与本申请实施例一相同的发明构思,请参考图7,本申请实施例二提供一种电子设备,包括:
第一获取单元101,用于获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
第一执行单元102,用于获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
第二执行单元103,用于基于所述第一实景图像及所述第一三维模型生成第一画面。
在本申请实施例二中,第一执行单元102包括:
第一获取模块,用于获取所述第一对象的预设光照反射模型;
第一执行模块,用于基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在本申请实施例二中,第一执行模块根据光照参数的不同,有如下两种不同的实现方式:
第一种方式:
在所述光照参数为光源点位置时,第一执行模块包括:
第一调整子模块,用于基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
第一执行子模块,用于基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
第二种方式:
在所述光照参数为光照强度值时,第一执行模块包括:
第一获取子模块,用于获取所述第一对象的颜色值;
第二调整子模块,用于基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
第二执行子模块,用于基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在本申请实施例二中,第二执行单元103包括:
第二执行模块,用于基于所述第一三维模型生成所述第一对象的第一三维图像;
第三执行模块,用于将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
实施例三
基于与本申请实施例一相同的发明构思,请参考图8,本申请实施例三提供一种电子设备,包括:
壳体10;
图像采集装置20,设置在壳体10内,用于获取第一实景图像;
传感器30,设置在壳体10内,用于获取光照参数;
处理器40,设置在壳体10内,用于获取所述第一实景图像中的第一对象对应的预设虚拟三维模型;基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;基于所述第一实景图像及所述第一三维模型生成第一画面。
在本申请实施例三中,处理器40具体用于:
获取所述第一对象的预设光照反射模型;
基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在本申请实施例三中,当所述光照参数为光源点位置时,处理器40具体用于:
基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在本申请实施例三中,当所述光照参数为光照强度值时,处理器40具体用于:
获取所述第一对象的颜色值;
基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
在本申请实施例三中,处理器40具体用于:
基于所述第一三维模型生成所述第一对象的第一三维图像;
将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
通过本申请实施例中的一个或多个技术方案,可以实现如下一个或多个技术效果:
一、由于本申请实施例中的技术方案,采用获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;基于所述第一实景图像及所述第一三维模型生成第一画面的技术手段,这样,通过实时获取现实场景中的光照参数来生成满足光照条件的第一对象的三维模型,然后利用AR技术将实时生成的三维模型与实景图像结合起来,形成AR画面。从而使AR画面中的三维模型能够根据实时获取的光照参数而发生变化,增加了三维模型与现实场景的融合度,给用户带来了更加真实的视觉效果,所以,有效解决了现有技术中的电子设备存在基于AR技术显示的三维模型的视觉效果差的技术问题,实现增加基于AR技术显示的三维模型与实际场景的融合度的技术效果。
二、由于本申请实施例中的技术方案,采用基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型以及获取所述第一对象的颜色值;基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型的技术手段,这样,电子设备可以根据获取的光源点位置及光照强度值对三维模型的光照效果进行调整,当光源点位置或者光照强度值发生变化时,三维模型的光照效果也会相应地发生变化,从而实现了AR画面中的三维模型的光照效果能够根据实时光照参数而发生改变的技术效果。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
具体来讲,本申请实施例中的信息处理方法对应的计算机程序指令可以被存储在光盘,硬盘,U盘等存储介质上,当存储介质中的与信息处理方法对应的计算机程序指令被一电子设备读取或被执行时,包括如下步骤:
获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
基于所述第一实景图像及所述第一三维模型生成第一画面。
可选的,所述存储介质中存储的与步骤:基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型,对应的计算机程序指令在被执行时,包括:
获取所述第一对象的预设光照反射模型;
基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,在所述光照参数为光源点位置时,所述存储介质中存储的与步骤:基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型,对应的计算机程序指令在被执行时,包括:
基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,在所述光照参数为光照强度值时,所述存储介质中存储的与步骤:基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型,对应的计算机程序指令在被执行时,包括:
获取所述第一对象的颜色值;
基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
可选的,所述存储介质中存储的与步骤:基于所述第一实景图像及所述第一三维模型生成第一画面,对应的计算机程序指令在被执行时,包括:
基于所述第一三维模型生成所述第一对象的第一三维图像;
将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (11)

1.一种信息处理方法,包括:
获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
基于所述第一实景图像及所述第一三维模型生成第一画面。
2.如权利要求1所述的方法,其特征在于,所述基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型,包括:
获取所述第一对象的预设光照反射模型;
基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
3.如权利要求2所述的方法,其特征在于,在所述光照参数为光源点位置时,所述基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型,包括:
基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
4.如权利要求2所述的方法,其特征在于,在所述光照参数为光照强度值时,所述基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型,包括:
获取所述第一对象的颜色值;
基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
5.如权利要求1-4中任一权项所述的方法,其特征在于,所述基于所述第一实景图像及所述第一三维模型生成第一画面,包括:
基于所述第一三维模型生成所述第一对象的第一三维图像;
将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
6.一种电子设备,包括:
第一获取单元,用于获取第一实景图像及与所述第一实景图像中的第一对象对应的预设虚拟三维模型;
第一执行单元,用于获取光照参数,基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;
第二执行单元,用于基于所述第一实景图像及所述第一三维模型生成第一画面。
7.一种电子设备,包括:
壳体;
图像采集装置,设置在所述壳体内,用于获取第一实景图像;
传感器,设置在所述壳体内,用于获取光照参数;
处理器,设置在所述壳体内,用于获取所述第一实景图像中的第一对象对应的预设虚拟三维模型;基于所述光照参数及所述预设虚拟三维模型,生成第一三维模型;基于所述第一实景图像及所述第一三维模型生成第一画面。
8.如权利要求7所述的电子设备,其特征在于,所述处理器具体用于:
获取所述第一对象的预设光照反射模型;
基于所述光照参数、所述预设光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
9.如权利要求8所述的电子设备,其特征在于,所述处理器具体用于:
基于所述光源点位置,调整所述预设光照反射模型的顶点所在的第一位置,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
10.如权利要求8所述的电子设备,其特征在于,所述处理器具体用于:
获取所述第一对象的颜色值;
基于所述光照强度值及所述颜色值,调整所述预设光照反射模型中包括顶点在内的至少两个点中每个点的第一颜色值,获得经调整的光照反射模型;
基于所述经调整的光照反射模型及所述预设虚拟三维模型,获得第一三维模型。
11.如权利要求7-10所述的电子设备,其特征在于,所述处理器具体用于:
基于所述第一三维模型生成所述第一对象的第一三维图像;
将所述第一三维图像替换所述实景图像中的所述第一对象,生成第一画面。
CN201610059916.3A 2016-01-28 2016-01-28 一种信息处理方法及电子设备 Pending CN105741343A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610059916.3A CN105741343A (zh) 2016-01-28 2016-01-28 一种信息处理方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610059916.3A CN105741343A (zh) 2016-01-28 2016-01-28 一种信息处理方法及电子设备

Publications (1)

Publication Number Publication Date
CN105741343A true CN105741343A (zh) 2016-07-06

Family

ID=56247837

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610059916.3A Pending CN105741343A (zh) 2016-01-28 2016-01-28 一种信息处理方法及电子设备

Country Status (1)

Country Link
CN (1) CN105741343A (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534835A (zh) * 2016-11-30 2017-03-22 珠海市魅族科技有限公司 一种图像处理方法以及装置
CN106803921A (zh) * 2017-03-20 2017-06-06 深圳市丰巨泰科电子有限公司 基于ar技术的即时音视频通信方法及装置
CN106980381A (zh) * 2017-03-31 2017-07-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN106991699A (zh) * 2017-03-31 2017-07-28 联想(北京)有限公司 控制方法及电子设备
CN107221024A (zh) * 2017-05-27 2017-09-29 网易(杭州)网络有限公司 虚拟对象毛发处理方法及装置、存储介质、电子设备
CN107580209A (zh) * 2017-10-24 2018-01-12 维沃移动通信有限公司 一种移动终端的拍照成像方法及装置
CN107734267A (zh) * 2017-09-11 2018-02-23 广东欧珀移动通信有限公司 图像处理方法和装置
CN109214351A (zh) * 2018-09-20 2019-01-15 太平洋未来科技(深圳)有限公司 一种ar成像方法、装置及电子设备
CN109255841A (zh) * 2018-08-28 2019-01-22 百度在线网络技术(北京)有限公司 Ar图像呈现方法、装置、终端及存储介质
CN110692237A (zh) * 2017-10-04 2020-01-14 谷歌有限责任公司 照明插入内容
CN111273885A (zh) * 2020-02-28 2020-06-12 维沃移动通信有限公司 一种ar图像显示方法及ar设备
CN111861632A (zh) * 2020-06-05 2020-10-30 北京旷视科技有限公司 虚拟试妆方法、装置、电子设备及可读存储介质
CN112774183A (zh) * 2019-11-07 2021-05-11 史克威尔·艾尼克斯有限公司 鉴赏系统、模型构成装置、控制方法以及记录介质
CN114494565A (zh) * 2021-12-31 2022-05-13 北京五八信息技术有限公司 一种增强现实显示方法和装置
US11503228B2 (en) 2017-09-11 2022-11-15 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method, image processing apparatus and computer readable storage medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3408263B2 (ja) * 1992-03-30 2003-05-19 株式会社東芝 情報提示装置及び情報提示方法
CN101908232A (zh) * 2010-07-30 2010-12-08 重庆埃默科技有限责任公司 一种交互式场景仿真系统及场景虚拟仿真方法
US20130229413A1 (en) * 2012-03-02 2013-09-05 Sean Geggie Live editing and integrated control of image-based lighting of 3d models
CN104077802A (zh) * 2014-07-16 2014-10-01 四川蜜蜂科技有限公司 增强虚拟场景实时仿真图像显示的方法
CN104268928A (zh) * 2014-08-29 2015-01-07 小米科技有限责任公司 图像处理方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3408263B2 (ja) * 1992-03-30 2003-05-19 株式会社東芝 情報提示装置及び情報提示方法
CN101908232A (zh) * 2010-07-30 2010-12-08 重庆埃默科技有限责任公司 一种交互式场景仿真系统及场景虚拟仿真方法
US20130229413A1 (en) * 2012-03-02 2013-09-05 Sean Geggie Live editing and integrated control of image-based lighting of 3d models
CN104077802A (zh) * 2014-07-16 2014-10-01 四川蜜蜂科技有限公司 增强虚拟场景实时仿真图像显示的方法
CN104268928A (zh) * 2014-08-29 2015-01-07 小米科技有限责任公司 图像处理方法及装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
KIPPER G等: "《增强现实技术导论》", 30 September 2014, 国防工业出版社 *
环浩: "(基于OpenGL_ES的iPhone渲染技术研发与应用", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
邹一波: "基于投影的增强现实系统的关键技术研究", 《万方学位论文库》 *

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534835A (zh) * 2016-11-30 2017-03-22 珠海市魅族科技有限公司 一种图像处理方法以及装置
CN106534835B (zh) * 2016-11-30 2018-08-07 珠海市魅族科技有限公司 一种图像处理方法以及装置
CN106803921A (zh) * 2017-03-20 2017-06-06 深圳市丰巨泰科电子有限公司 基于ar技术的即时音视频通信方法及装置
CN106991699B (zh) * 2017-03-31 2020-11-20 联想(北京)有限公司 控制方法及电子设备
CN106980381A (zh) * 2017-03-31 2017-07-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN106991699A (zh) * 2017-03-31 2017-07-28 联想(北京)有限公司 控制方法及电子设备
CN107221024A (zh) * 2017-05-27 2017-09-29 网易(杭州)网络有限公司 虚拟对象毛发处理方法及装置、存储介质、电子设备
CN107221024B (zh) * 2017-05-27 2022-03-04 网易(杭州)网络有限公司 虚拟对象毛发处理方法及装置、存储介质、电子设备
CN107734267A (zh) * 2017-09-11 2018-02-23 广东欧珀移动通信有限公司 图像处理方法和装置
US11503228B2 (en) 2017-09-11 2022-11-15 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method, image processing apparatus and computer readable storage medium
US11516412B2 (en) 2017-09-11 2022-11-29 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method, image processing apparatus and electronic device
CN107734267B (zh) * 2017-09-11 2020-06-26 Oppo广东移动通信有限公司 图像处理方法和装置
CN110692237A (zh) * 2017-10-04 2020-01-14 谷歌有限责任公司 照明插入内容
CN110692237B (zh) * 2017-10-04 2022-05-24 谷歌有限责任公司 用于照明插入内容的方法、系统和介质
CN107580209A (zh) * 2017-10-24 2018-01-12 维沃移动通信有限公司 一种移动终端的拍照成像方法及装置
CN107580209B (zh) * 2017-10-24 2020-04-21 维沃移动通信有限公司 一种移动终端的拍照成像方法及装置
CN109255841A (zh) * 2018-08-28 2019-01-22 百度在线网络技术(北京)有限公司 Ar图像呈现方法、装置、终端及存储介质
CN109214351A (zh) * 2018-09-20 2019-01-15 太平洋未来科技(深圳)有限公司 一种ar成像方法、装置及电子设备
CN109214351B (zh) * 2018-09-20 2020-07-07 太平洋未来科技(深圳)有限公司 一种ar成像方法、装置及电子设备
CN112774183A (zh) * 2019-11-07 2021-05-11 史克威尔·艾尼克斯有限公司 鉴赏系统、模型构成装置、控制方法以及记录介质
US11941763B2 (en) 2019-11-07 2024-03-26 Square Enix Co., Ltd. Viewing system, model creation apparatus, and control method
CN111273885A (zh) * 2020-02-28 2020-06-12 维沃移动通信有限公司 一种ar图像显示方法及ar设备
CN111861632A (zh) * 2020-06-05 2020-10-30 北京旷视科技有限公司 虚拟试妆方法、装置、电子设备及可读存储介质
CN111861632B (zh) * 2020-06-05 2023-06-30 北京旷视科技有限公司 虚拟试妆方法、装置、电子设备及可读存储介质
CN114494565A (zh) * 2021-12-31 2022-05-13 北京五八信息技术有限公司 一种增强现实显示方法和装置

Similar Documents

Publication Publication Date Title
CN105741343A (zh) 一种信息处理方法及电子设备
US10652522B2 (en) Varying display content based on viewpoint
US9202309B2 (en) Methods and apparatus for digital stereo drawing
CN110070621B (zh) 电子装置、显示增强现实场景的方法及电脑可读取媒体
US6677956B2 (en) Method for cross-fading intensities of multiple images of a scene for seamless reconstruction
KR101732836B1 (ko) 셰이더 기반의 그래픽스 콘텐츠에 대한 뷰잉 배향에 의한 입체 변환
KR101376880B1 (ko) 3d 그래픽을 위한 2d 편집 메타포어
CN112316420A (zh) 模型渲染方法、装置、设备及存储介质
CA2984785A1 (en) Virtual reality editor
CN102449680A (zh) 信息呈现装置
US11922602B2 (en) Virtual, augmented, and mixed reality systems and methods
US11818325B2 (en) Blended mode three dimensional display systems and methods
CN105389846A (zh) 一种三维模型的展示方法
CN111402385B (zh) 一种模型处理的方法及装置、电子设备、存储介质
CN114067043A (zh) 一种虚拟模型的渲染方法和装置
CN105072429A (zh) 一种投影方法及装置
CN109949396A (zh) 一种渲染方法、装置、设备和介质
US11574447B2 (en) Method for capturing real-world information into virtual environment and related head-mounted device
CN116483358B (zh) 一种桌面式vr的伪3d用户界面实现方法及系统
KR20200087005A (ko) 홀로그램 메뉴 시스템을 이용한 인터렉션 방법
KR101999066B1 (ko) 2차원 화상공간의 음영 처리 방법 및 장치
Hisada et al. Free-form shape design system using stereoscopic projector-hyperreal 2.0
JP2007280014A (ja) 表示パラメータ入力装置
CN118628661A (zh) 基于头显设备的建模方法、系统、头显设备及存储介质
Raskar Projectors: advanced graphics and vision techniques

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160706