CN109064551A - 电子设备的信息处理方法和装置 - Google Patents
电子设备的信息处理方法和装置 Download PDFInfo
- Publication number
- CN109064551A CN109064551A CN201810946542.6A CN201810946542A CN109064551A CN 109064551 A CN109064551 A CN 109064551A CN 201810946542 A CN201810946542 A CN 201810946542A CN 109064551 A CN109064551 A CN 109064551A
- Authority
- CN
- China
- Prior art keywords
- user
- electronic equipment
- depth information
- depth
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
Abstract
本公开提供了一种电子设备的信息处理方法,所述电子设备包括深度传感器,所述方法包括:通过所述深度传感器获取用户的深度信息;以及基于所述深度信息以及所述用户对应的三维模型重建所述用户的虚拟人像,其中,所述三维模型包括所述用户的人像信息,所述虚拟人像与所述深度信息相对应。本公开还提供了一种电子设备的信息处置装置、一种处理系统以及一种计算机可读介质。
Description
技术领域
本公开涉及一种电子设备的信息处理方法和信息处理装置。
背景技术
随着科学技术的快速发展,各种各样的电子设备应用而生。目前,摄像装置已经在电子设备中被广泛使用,并且大部分电子设备的摄像装置通常存在两个摄像头,即前置摄像头和后置摄像头。由于目前高屏占比的趋势,前置摄像头的存在通常会制约高屏占比的发展,很难实现全面屏。
发明内容
本公开的一个方面提供了一种电子设备的信息处理方法,所述电子设备包括深度传感器,所述方法包括:通过所述深度传感器获取用户的深度信息,以及基于所述深度信息以及所述用户对应的三维模型重建所述用户的虚拟人像,其中,所述三维模型包括所述用户的人像信息,所述虚拟人像与所述深度信息相对应。
可选地,上述方法还包括:获取多张图像以及所述多张图像的深度信息,所述图像中包括所述用户至少部分身体部位,以及基于所述多张图像以及所述多张图像的深度信息建立所述用户的三维模型。
可选地,上述深度传感器与所述电子设备的显示屏设置于所述电子设备的同一面。
可选地,上述方法还包括:基于所述虚拟人像生成相应的图像,以及显示所述图像。其中,显示所述图像,包括:视频聊天应用获取生成的所述图像,在所述视频聊天应用对应的界面中显示所述图像,以及将所述图像发送至通过所述视频聊天应用连接的另一电子设备,以使得所述另一电子设备显示所述图像。
可选地,上述用户的深度信息至少包括所述用户的面部深度信息。
可选地,上述基于所述多张图像以及所述多张图像的深度信息建立所述用户的三维模型,包括:基于多张彩色图像以及所述多张彩色图像的深度信息建立所述用户的三维模型,所述三维模型包括所述用户对应的颜色参数。
本公开的另一个方面提供了一种电子设备的信息处理装置,所述电子设备包括深度传感器,所述装置包括第一获取模块和重建模块。其中,第一获取模块通过所述深度传感器获取用户的深度信息。重建模块基于所述深度信息以及所述用户对应的三维模型重建所述用户的虚拟人像,其中,所述三维模型包括所述用户的人像信息,所述虚拟人像与所述深度信息相对应。
可选地,上述装置还包括第二获取模块和创建模块。第二获取模块获取多张图像以及所述多张图像的深度信息,所述图像中包括所述用户至少部分身体部位。创建模块基于所述多张图像以及所述多张图像的深度信息创建所述用户的三维模型。
可选地,上述深度传感器与所述电子设备的显示屏设置于所述电子设备的同一面。
可选地,上述装置还包括生成模块和显示模块。生成模块基于所述虚拟人像生成相应的图像。显示模块显示所述图像。其中,显示所述图像,包括:视频聊天应用获取生成的所述图像,在所述视频聊天应用对应的界面中显示所述图像,以及将所述图像发送至通过所述视频聊天应用连接的另一电子设备,以使得所述另一电子设备显示所述图像。
可选地,上述用户的深度信息至少包括所述用户的面部深度信息。
可选地,上述基于所述多张图像以及所述多张图像的深度信息创建所述用户的三维模型,包括:基于多张彩色图像以及所述多张彩色图像的深度信息创建所述用户的三维模型,所述三维模型包括所述用户对应的颜色参数。
本公开的另一方面提供了一种处理系统,包括:一个或多个处理器,存储装置,用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行如上所述的方法。
本公开的另一方面提供了一种计算机可读介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1A和1B示意性示出了根据本公开实施例的电子设备的信息处理方法和装置的应用场景;
图2示意性示出了根据本公开实施例的电子设备的信息处理方法的流程图;
图3示意性示出了根据本公开另一实施例的电子设备的信息处理方法的流程图;
图4A和4B示意性示出了根据本公开实施例的电子设备的信息处理装置的框图;以及
图5示意性示出了根据本公开实施例的处理系统的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。本领域技术人员还应理解,实质上任意表示两个或更多可选项目的转折连词和/或短语,无论是在说明书、权利要求书还是附图中,都应被理解为给出了包括这些项目之一、这些项目任一方、或两个项目的可能性。例如,短语“A或B”应当被理解为包括“A”或“B”、或“A和B”的可能性。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种电子设备的信息处理方法,电子设备包括深度传感器。该方法包括:通过深度传感器获取用户的深度信息,以及基于深度信息和用户对应的三维模型重建该用户的虚拟人像。其中,三维模型包括该用户的人像信息,该用户的虚拟人像与获取到的深度信息相对应。
图1A和1B示意性示出了根据本公开实施例的电子设备的信息处理方法和装置的应用场景100。
如图1A所示,现有技术中电子设备110通常包括前置摄像头111。前置摄像头111与电子设备110的显示屏设置在同一面。
可以理解,摄像头由于其自身工作原理,需要占用较大的面积。然而随着用户对电子设备显示界面的要求日益增高,电子设备正在向高屏占比方向发展。而前置摄像头111的存在显然限制了全面屏的发展。
基于此,如图1B所示,本公开实施例的电子设备110包括深度传感器112,深度传感器112可以与电子设备110的显示屏设置在同一面。
本公开实施例提供了一种优化的方法,可以通过深度传感器112获取用户的深度信息,并且基于深度信息构建用户的虚拟人像。从而在一些场景中可以替代前置摄像头,进而可以为全面屏的发展减轻阻碍。
需要注意的是,图1所示仅为可以应用本公开实施例的场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
图2示意性示出了根据本公开实施例的电子设备的信息处理方法的流程图。
如图2所示,该方法包括操作S201~S202。
在操作S201,通过深度传感器获取用户的深度信息。
在操作S202,基于深度信息以及用户对应的三维模型重建该用户的虚拟人像,其中,三维模型包括用户的人像信息,虚拟人像与获取的深度信息相对应。
本公开实施例的方法可以应用于电子设备中,该电子设备可以配置有深度传感器。电子设备可以是具有显示屏的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
在本公开实施例中,深度传感器可以与电子设备的显示屏设置于电子设备的同一面。例如,电子设备可以是手机,本公开实施例的深度传感器可以设置于手机显示屏所在的平面内。例如,在本公开一些实施例中,电子设备可以不包括前置摄像头,可以通过前置深度传感器代替前置摄像头。
根据本公开实施例,可以通过深度传感器获取用户的深度信息。在本公开实施例中,可以在满足预设条件的情况下,通过深度传感器获取用户的深度信息。例如,用户打开拍照应用,选择前置拍摄模式,则可以打开深度传感器获取用户的深度信息。或者,例如用户打开视频通话应用,则可以打开深度传感器获取用户的深度信息。
在本公开实施例中,获取用户的深度信息至少包括用户的至少部分身体部分的深度信息。例如,可以获取用户的面目深度信息。
根据本公开实施例,可以基于获取的用户深度信息以及该用户对应的三维模型重建该用户的虚拟人像。
在本公开实施例中,可以先建立特定用户对应的三维模型。具体地,可以获取特定用户的多张图像以及多张图像的深度信息,图像中包括特定用户的至少部分身体部位,以及基于多张图像以及多张图像的深度信息建立该用户的三维模型。
例如,可以获取用户的多张图像,以及每张图像对应深度信息,基于多张图像及其对应的深度信息构建三维模型。根据本公开实施例,建立好的三维模型可以根据该用户的深度信息模拟出与该深度信息对应的虚拟人像。
例如,可以根据用户A的多张图像及相应的深度信息构建用户A的三维面部模型,该三维面部模型可以根据获取的实时的用户的深度信息模拟出相应的虚拟人像,从而在某些应用场景中可以替代前置摄像头获取的人像。
在本公开实施例中,为了获得更好的三维模型,可以基于多张彩色图像以及多张彩色图像的深度信息建立用户的三维模型,该三维模型包括用户对应的颜色参数,例如,三维模型中可以包括用户的皮肤颜色,瞳孔颜色或者发色等。从而该三维模型模拟出的虚拟人像可以具有颜色,更加贴近前置摄像头获取到的人像。
根据本公开实施例,例如电子设备可以是手机,用户可以通过手机的后置摄像头和后置深度传感器获取的图像和深度信息建立三维模型,该三维模型可以存储在电子设备中。当用户需要前置拍摄的情况下(例如,自拍或者视频通话),可以通过电子设备的前置深度传感器获得用户当前的深度信息,基于当前深度信息以及存储的三维模型还原该用户的动作从而输出模拟的虚拟人像,进而可以省略前置摄像头,为全面屏的发展减轻阻碍。
本公开实施例可以在电子设备的显示屏所在的平面设置深度传感器,并为特定的用户建立三维模型。在用户需要前置拍摄的时候,可以通过前置深度传感器获得用户的深度信息,然后基于建立好的三维模型还原该深度信息从而输出相应的虚拟人像。进而可以省略电子设备的前置摄像头,为全面屏的发展减轻阻碍。
图3示意性示出了根据本公开另一实施例的电子设备的信息处理方法的流程图。
如图3所示,该方法包括操作S201~S202以及操作S301~S302。其中,操作S201~S202与上述参考图2描述的方法相同或类似,在此不再赘述。
在操作S301,基于重建的虚拟人像生成相应的图像。
在操作S302,显示该图像。
在本公开实施例中,基于三维模型重建的虚拟人像也是三维人像。在一些场景中,本公开实施例可以基于该三维人像生成相应的二维图像,然后显示该二维图像。
例如,在前置拍照应用中或者视频通话过程中,通常以二维图像的形式显示在显示屏上,或者存储在存储装置中,或者传输在网络中。因此,本公开实施例,可以先通过前置深度传感器获得用户的深度信息,基于该深度信息建立对应的三维虚拟人像,然后将三维虚拟人像转化为二维图像以便于显示、或者保存或者传输。
根据本公开实施例,显示图像可以包括:视频聊天应用获取生成的图像,在视频聊天应用对应的界面中显示该图像以及将图像发送至通过视频聊天应用连接的另一电子设备,以使得另一电子设备显示该图像。
例如,用户A和用户B通过视频聊天应用建立视频通话,用户A可以通过前置深度传感器获取实时的深度信息,从而构建实时的三维虚拟人像,用户A的电子设备可以根据实时的三维虚拟人像生成实时的二维图像,以便用户A的视频聊天应用获取该实时二维图像,显示在用户A的视频通话界面的同时也发送给用户B,以便用户B也可以实时显示该二维图像。
本公开实施例可以在电子设备的显示屏所在的平面设置深度传感器,并为特定的用户建立三维模型。在用户需要前置拍摄的时候,可以通过前置深度传感器获得用户的深度信息,然后基于建立好的三维模型还原该深度信息从而输出相应的虚拟人像。进而可以省略电子设备的前置摄像头,为全面屏的发展减轻阻碍。
本公开实施例还可以将构建的虚拟人像生成相应的二维图像,更加贴近摄像头获取的图像的格式,可以更好的替代前置摄像头,以便电子设备进行显示或者存储或者传输。
图4A和4B示意性示出了根据本公开实施例的电子设备的信息处理装置400的框图。
如图4A所示,处理装置400包括第一获取模块410和重建模块420。
第一获取模块410通过深度传感器获取用户的深度信息。
重建模块420基于深度信息以及用户对应的三维模型重建该用户的虚拟人像,其中,三维模型包括该用户的人像信息,虚拟人像与获取的深度信息相对应。
根据本公开实施例,电子设备可以包括有深度传感器,深度传感器可以与电子设备的显示屏设置于电子设备的同一面。
根据本公开实施例,获取用户的深度信息至少包括获取用户的面部深度信息。
如图4B所示,处理装置400还可以包括第二获取模块430、创建模块440、生成模块450以及显示模块460。
第二获取模块430获取多张图像以及多张图像的深度信息,图像中包括用户至少部分身体部位。
创建模块440基于多张图像以及多张图像的深度信息创建用户的三维模型。
生成模块450基于虚拟人像生成相应的图像。
显示模块460显示生成的图像。
根据本公开实施例,基于多张图像以及多张图像的深度信息创建用户的三维模型,可以包括:基于多张彩色图像以及多张彩色图像的深度信息创建用户的三维模型,三维模型包括用户对应的颜色参数。
根据本公开实施例,显示图像,可以包括:视频聊天应用获取生成的图像,在视频聊天应用对应的界面中显示该图像,以及将该图像发送至通过视频聊天应用连接的另一电子设备,以使得另一电子设备显示该图像。
根据本公开实施例,如图4A和4B所示的处理装置400例如可以执行上文参考图2或图3描述的处理方法,在此不再赘述。
本公开实施例可以在电子设备的显示屏所在的平面设置深度传感器,并为特定的用户建立三维模型。在用户需要前置拍摄的时候,可以通过前置深度传感器获得用户的深度信息,然后基于建立好的三维模型还原该深度信息从而输出相应的虚拟人像。进而可以省略电子设备的前置摄像头,为全面屏的发展减轻阻碍。
本公开实施例还可以将构建的虚拟人像生成相应的二维图像,更加贴近摄像头获取的图像的格式,可以更好的替代前置摄像头,以便电子设备进行显示或者存储或者传输。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,第一获取模块410、重建模块420、第二获取模块430、创建模块440、生成模块450以及显示模块460中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,第一获取模块410、重建模块420、第二获取模块430、创建模块440、生成模块450以及显示模块460中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,第一获取模块410、重建模块420、第二获取模块430、创建模块440、生成模块450以及显示模块460中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图5示意性示出了根据本公开实施例的适于实现上文描述的方法的处理系统的方框图。图5示出的处理系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,处理系统500包括处理器510、计算机可读存储介质520。该处理系统500可以执行根据本公开实施例的方法。
具体地,处理器510例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器510还可以包括用于缓存用途的板载存储器。处理器510可以是用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
计算机可渎存储介质520,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
计算机可读存储介质520可以包括计算机程序521,该计算机程序521可以包括代码/计算机可执行指令,其在由处理器510执行时使得处理器510执行根据本公开实施例的方法或其任何变形。
计算机程序521可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,计算机程序521中的代码可以包括一个或多个程序模块,例如包括521A、模块521B、……。应当注意,模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器510执行时,使得处理器510可以执行根据本公开实施例的方法或其任何变形。
根据本发明的实施例,第一获取模块410、重建模块420、第二获取模块430、创建模块440、生成模块450以及显示模块460中的至少一个可以实现为参考图5描述的计算机程序模块,其在被处理器510执行时,可以实现上面描述的相应操作。
本公开还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
根据本公开的实施例,计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只渎存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线、光缆、射频信号等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。
Claims (10)
1.一种电子设备的信息处理方法,所述电子设备包括深度传感器,所述方法包括:
通过所述深度传感器获取用户的深度信息;
基于所述深度信息以及所述用户对应的三维模型重建所述用户的虚拟人像,其中,所述三维模型包括所述用户的人像信息,所述虚拟人像与所述深度信息相对应。
2.根据权利要求1所述的方法,还包括:
获取多张图像以及所述多张图像的深度信息,所述图像中包括所述用户至少部分身体部位;
基于所述多张图像以及所述多张图像的深度信息建立所述用户的三维模型。
3.根据权利要求1所述的方法,其中,所述深度传感器与所述电子设备的显示屏设置于所述电子设备的同一面。
4.根据权利要求1所述的方法,还包括:
基于所述虚拟人像生成相应的图像;以及
显示所述图像;
其中,显示所述图像,包括:
视频聊天应用获取生成的所述图像;
在所述视频聊天应用对应的界面中显示所述图像;
将所述图像发送至通过所述视频聊天应用连接的另一电子设备,以使得所述另一电子设备显示所述图像。
5.根据权利要求1所述的方法,其中,所述用户的深度信息至少包括所述用户的面部深度信息。
6.根据权利要求2所述的方法,其中,所述基于所述多张图像以及所述多张图像的深度信息建立所述用户的三维模型,包括:
基于多张彩色图像以及所述多张彩色图像的深度信息建立所述用户的三维模型,所述三维模型包括所述用户对应的颜色参数。
7.一种电子设备的信息处理装置,所述电子设备包括深度传感器,所述装置包括:
第一获取模块,通过所述深度传感器获取用户的深度信息;
重建模块,基于所述深度信息以及所述用户对应的三维模型重建所述用户的虚拟人像,其中,所述三维模型包括所述用户的人像信息,所述虚拟人像与所述深度信息相对应。
8.根据权利要求7所述的装置,还包括:
第二获取模块,获取多张图像以及所述多张图像的深度信息,所述图像中包括所述用户至少部分身体部位;
创建模块,基于所述多张图像以及所述多张图像的深度信息创建所述用户的三维模型。
9.一种处理系统,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行根据权利要求1~6中任一项所述的方法。
10.一种计算机可读介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行根据权利要求1~6中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810946542.6A CN109064551B (zh) | 2018-08-17 | 2018-08-17 | 电子设备的信息处理方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810946542.6A CN109064551B (zh) | 2018-08-17 | 2018-08-17 | 电子设备的信息处理方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109064551A true CN109064551A (zh) | 2018-12-21 |
CN109064551B CN109064551B (zh) | 2022-03-25 |
Family
ID=64686522
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810946542.6A Active CN109064551B (zh) | 2018-08-17 | 2018-08-17 | 电子设备的信息处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109064551B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109547770A (zh) * | 2018-12-28 | 2019-03-29 | 努比亚技术有限公司 | 使用裸眼3d视频聊天的方法及装置、移动终端及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103916621A (zh) * | 2013-01-06 | 2014-07-09 | 腾讯科技(深圳)有限公司 | 视频通信方法及装置 |
CN104376599A (zh) * | 2014-12-11 | 2015-02-25 | 苏州丽多网络科技有限公司 | 一种简便的三维头部模型生成系统 |
CN105144247A (zh) * | 2012-12-12 | 2015-12-09 | 微软技术许可有限责任公司 | 用户的三维表示的生成 |
CN105513114A (zh) * | 2015-12-01 | 2016-04-20 | 深圳奥比中光科技有限公司 | 三维动画生成的方法和装置 |
CN107566777A (zh) * | 2017-09-11 | 2018-01-09 | 广东欧珀移动通信有限公司 | 视频聊天的画面处理方法、装置和存储介质 |
CN107592449A (zh) * | 2017-08-09 | 2018-01-16 | 广东欧珀移动通信有限公司 | 三维模型建立方法、装置和移动终端 |
CN107622526A (zh) * | 2017-10-19 | 2018-01-23 | 张津瑞 | 一种基于手机面部识别组件进行三维扫描建模的方法 |
US20180031364A1 (en) * | 2016-07-28 | 2018-02-01 | Liberty Reach Inc. | Method and system for measuring outermost dimension of a vehicle positioned at an inspection station |
-
2018
- 2018-08-17 CN CN201810946542.6A patent/CN109064551B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105144247A (zh) * | 2012-12-12 | 2015-12-09 | 微软技术许可有限责任公司 | 用户的三维表示的生成 |
CN103916621A (zh) * | 2013-01-06 | 2014-07-09 | 腾讯科技(深圳)有限公司 | 视频通信方法及装置 |
CN104376599A (zh) * | 2014-12-11 | 2015-02-25 | 苏州丽多网络科技有限公司 | 一种简便的三维头部模型生成系统 |
CN105513114A (zh) * | 2015-12-01 | 2016-04-20 | 深圳奥比中光科技有限公司 | 三维动画生成的方法和装置 |
US20180031364A1 (en) * | 2016-07-28 | 2018-02-01 | Liberty Reach Inc. | Method and system for measuring outermost dimension of a vehicle positioned at an inspection station |
CN107592449A (zh) * | 2017-08-09 | 2018-01-16 | 广东欧珀移动通信有限公司 | 三维模型建立方法、装置和移动终端 |
CN107566777A (zh) * | 2017-09-11 | 2018-01-09 | 广东欧珀移动通信有限公司 | 视频聊天的画面处理方法、装置和存储介质 |
CN107622526A (zh) * | 2017-10-19 | 2018-01-23 | 张津瑞 | 一种基于手机面部识别组件进行三维扫描建模的方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109547770A (zh) * | 2018-12-28 | 2019-03-29 | 努比亚技术有限公司 | 使用裸眼3d视频聊天的方法及装置、移动终端及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN109064551B (zh) | 2022-03-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102646695B1 (ko) | 비디오 프레임 보간을 위한 특징 피라미드 워핑 | |
CN109087346B (zh) | 单目深度模型的训练方法、训练装置和电子设备 | |
EP3889915A2 (en) | Method and apparatus for generating virtual avatar, device, medium and computer program product | |
CN110869980A (zh) | 用于将内容分发和呈现为球形视频和3d资产组合的系统和方法 | |
US11756153B2 (en) | Hemisphere cube map projection format in imaging environments | |
CN105611267B (zh) | 现实世界和虚拟世界图像基于深度和色度信息的合并 | |
US11918412B2 (en) | Generating a simulated image of a baby | |
CN109840946A (zh) | 虚拟对象显示方法及装置 | |
CN108364029A (zh) | 用于生成模型的方法和装置 | |
CN110111241A (zh) | 用于生成动态图像的方法和装置 | |
WO2020069427A1 (en) | Panoramic light field capture, processing and display | |
CN107316272A (zh) | 用于图像处理的方法及其设备 | |
CN113936085A (zh) | 三维重建方法和装置 | |
CN107277490B (zh) | 可重配置多模式相机 | |
CN110290285A (zh) | 图像处理方法、图像处理装置、图像处理系统及介质 | |
US11032470B2 (en) | Sensors arrangement and shifting for multisensory super-resolution cameras in imaging environments | |
CN114782659A (zh) | 图像处理方法、装置、设备及存储介质 | |
CN110264539A (zh) | 图像生成方法和装置 | |
CN109064551A (zh) | 电子设备的信息处理方法和装置 | |
CN109983504A (zh) | 通过使用多层移动来促进立体视觉的方法和装置 | |
US20230401789A1 (en) | Methods and systems for unified rendering of light and sound content for a simulated 3d environment | |
CN114697568B (zh) | 特效视频确定方法、装置、电子设备及存储介质 | |
CN109816791A (zh) | 用于生成信息的方法和装置 | |
US20240046560A1 (en) | Three-Dimensional Model Reconstruction Method, Device, and Storage Medium | |
US11620796B2 (en) | Expert knowledge transfer using egocentric video |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |