CN113592990A - 针对二维图像的三维效果生成方法、装置、设备及介质 - Google Patents

针对二维图像的三维效果生成方法、装置、设备及介质 Download PDF

Info

Publication number
CN113592990A
CN113592990A CN202110172749.4A CN202110172749A CN113592990A CN 113592990 A CN113592990 A CN 113592990A CN 202110172749 A CN202110172749 A CN 202110172749A CN 113592990 A CN113592990 A CN 113592990A
Authority
CN
China
Prior art keywords
target
pixel
pixel point
image
dimensional image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110172749.4A
Other languages
English (en)
Inventor
王薷健
孙磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202110172749.4A priority Critical patent/CN113592990A/zh
Publication of CN113592990A publication Critical patent/CN113592990A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T5/70

Abstract

本申请公开了一种针对二维图像的三维效果生成方法、装置、设备及介质,属于人工智能技术领域。方法包括:获取二维图像对应的像素位移信息;基于像素位移信息中的计划位移量,生成系数信息;对于二维图像中的目标像素点,基于目标像素点及其相邻像素点的像素值和加权系数,确定目标像素点在目标图像中的像素值。本申请实施例提供的技术方案中,对目标像素点的像素值进行平滑处理,保证目标图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,有效提高二维图像的三维效果的真实性,提升图像内容的平滑度和视觉效果。

Description

针对二维图像的三维效果生成方法、装置、设备及介质
技术领域
本申请涉及人工智能技术领域,特别涉及一种针对二维图像的三维效果生成方法、装置、设备及介质。
背景技术
目前,三维视频在最终显示时包含两幅略有不同的图像,分别对应左右眼视图。人脑根据左右眼看到图像的差异,自动计算深度从而产生立体感。
在相关技术中,计算机设备在将二维图像转换为三维效果时,可以将左右眼模拟为两个摄像机,假设二维图像在双眼正中间,进一步地,根据二维图像中的深度信息,确定左右眼图像的像素位移矩阵,并在二维图像的原图像素矩阵的基础上,结合该像素位移矩阵四舍五入后的整数结果,生成目标图像,该目标图像用于生成二维图像的三维效果。
然而,在上述相关技术中,在二维图像转换为用于生成三维效果的目标图像的过程中,通过将像素位移信息四舍五入之后得到的像素点的位移量,然后依据这个四舍五入之后得到的位移量对二维图像中的像素点进行移动从而生成目标图像,这种方式会导致具有相同或相近像素值的像素点,因位移量不同而导致在位置上不连续,从而出现视觉断层现象。
发明内容
本申请实施例提供了一种针对二维图像的三维效果生成方法、装置、设备及介质,能够对目标像素点的像素值进行平滑处理,提升图像内容的平滑度和视觉效果。所述技术方案如下:
根据本申请实施例的一个方面,提供了一种针对二维图像的三维效果生成方法,所述方法包括:
获取二维图像对应的像素位移信息,所述像素位移信息包括所述二维图像中各个像素点在目标图像中的计划位移量;其中,所述目标图像用于生成所述二维图像的三维效果;
基于所述像素位移信息中的计划位移量,生成系数信息,所述系数信息包括所述二维图像中各个像素点的加权系数;
对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值。
根据本申请实施例的一个方面,提供了一种针对二维图像的三维效果显示方法,所述方法包括:
获取二维图像对应的目标图像,所述目标图像用于生成所述二维图像的三维效果;
显示所述目标图像;
其中,所述二维图像中的目标像素点在所述目标图像中的像素值,是基于所述目标像素点及其相邻像素点的像素值和加权系数确定的,所述目标像素点的加权系数是基于所述目标像素点在所述目标图像中的计划位移量确定的。
根据本申请实施例的一个方面,提供了一种针对二维图像的三维效果生成装置,所述装置包括:
位移获取模块,用于获取二维图像对应的像素位移信息,所述像素位移信息包括所述二维图像中各个像素点在目标图像中的计划位移量;其中,所述目标图像用于生成所述二维图像的三维效果;
系数生成模块,用于基于所述像素位移信息中的计划位移量,生成系数信息,所述系数信息包括所述二维图像中各个像素点的加权系数;
像素确定模块,用于对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值。
根据本申请实施例的一个方面,提供了一种针对二维图像的三维效果显示装置,所述装置包括:
图像获取模块,用于获取二维图像对应的目标图像,所述目标图像用于生成所述二维图像的三维效果;
目标显示模块,用于显示所述目标图像;其中,所述二维图像中的目标像素点在所述目标图像中的像素值,是基于所述目标像素点及其相邻像素点的像素值和加权系数确定的,所述目标像素点的加权系数是基于所述目标像素点在所述目标图像中的计划位移量确定的。
根据本申请实施例的一个方面,本申请实施例提供了一种计算机设备,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述针对二维图像的三维效果生成方法,或实现上述针对二维图像的三维效果显示方法。
可选地,所述计算机设备为终端或服务器。
根据本申请实施例的一个方面,本申请实施例提供了一种计算机可读存储介质,所述可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现上述针对二维图像的三维效果生成方法,或实现上述针对二维图像的三维效果显示方法。
根据本申请实施例的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述针对二维图像的三维效果生成方法,或执行上述针对二维图像的三维效果显示方法。
本申请实施例提供的技术方案可以带来如下有益效果:
通过二维图像的像素位移信息生成系数信息,并在确定二维图像对应的目标图像时,采用目标像素点及其相邻像素点的像素值和加权系数确定目标图像,其中,加权系数包含于系数信息中,也就是说,在确定用于展现二维图像的三维效果的目标图像时,通过目标像素点及其相邻像素点的像素值和加权系数确定目标像素点在目标图像中的像素值,对目标像素点的像素值进行平滑处理,保证目标图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,提升图像内容的平滑度和视觉效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一个实施例提供的三维效果生成系统的示意图;
图2是本申请一个实施例提供的针对二维图像的三维效果生成方法的流程图;
图3示例性示出了一种针对二维图像的三维效果生成方式的示意图;
图4是本申请另一个实施例提供的针对二维图像的三维效果生成方法的流程图;
图5是本申请再一个实施例提供的针对二维图像的三维效果生成方法的流程图;
图6和图7示例性示出左眼图像和右眼图像的像素点位置的示意图;
图8是本申请一个实施例提供的针对二维图像的三维效果显示方法的流程图;
图9示例性示出了相关技术与本申请的比较的示意图;
图10是本申请一个实施例提供的针对二维图像的三维效果生成装置的框图;
图11是本申请另一个实施例提供的针对二维图像的三维效果生成装置的框图;
图12是本申请一个实施例提供的针对二维图像的三维效果显示装置的框图;
图13是本申请一个实施例提供的服务器的结构框图;
图14是本申请一个实施例提供的终端的结构框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。
人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
计算机视觉技术(Computer Vision,CV)是一门研究如何使机器“看”的科学,更进一步的说,就是指用摄影机和电脑代替人眼对目标进行识别、跟踪和测量等机器视觉,并进一步做图形处理,使电脑处理成为更适合人眼观察或传送给仪器检测的图像。作为一个科学学科,计算机视觉研究相关的理论和技术,试图建立能够从图像或者多维数据中获取信息的人工智能系统。计算机视觉技术通常包括图像处理、图像识别、图像语义理解、图像检索、OCR、视频处理、视频语义理解、视频内容/行为识别、三维物体重建、3D技术、虚拟现实、增强现实、同步定位与地图构建等技术,还包括常见的人脸识别、指纹识别等生物特征识别技术。
随着人工智能技术研究和进步,人工智能技术在多个领域展开研究和应用,例如常见的智能家居、智能穿戴设备、虚拟助理、智能音箱、智能营销、无人驾驶、自动驾驶、无人机、机器人、智能医疗、智能客服等,相信随着技术的发展,人工智能技术将在更多的领域得到应用,并发挥越来越重要的价值。
本申请实施例提供的方案涉及人工智能的计算机视觉等技术,采用图像处理技术获取二维图像中的深度信息,并基于该深度信息获取像素位移信息,进而基于该像素位移信息生成系数信息,在确定目标像素点在目标图像中的像素值时,在目标像素点在二维图像中的像素值的基础上,从系数信息中获取该目标像素点以及其相邻像素点的加权系数,并通过目标像素点的像素值和目标像素点以及其相邻像素点的加权系数,确定目标像素点在目标图像中的像素值。其中,目标图像用于生成二维图像的三维效果。
请参考图1,其示出了本申请一个实施例提供的三维效果生成系统的示意图。该三维效果生成系统可以包括:终端10和服务器20。
终端10可以是诸如手机、平板电脑、游戏主机、电子书阅读器、多媒体播放设备、可穿戴设备、PC(Personal Computer,个人计算机)、智能电视、智能车载终端等电子设备。上述终端10中可以安装应用程序的客户端。其中,该应用程序可以是任意具有三维效果显示功能的应用程序,如视频应用程序、游戏应用程序、购物应用程序、图像应用程序等。可选地,上述应用程序可以是需要下载安装的应用程序,也可以是即点即用的应用程序,本申请实施例对此不作限定。
服务器20用于为终端10中的应用程序的客户端提供后台服务。例如,服务器20可以是上述应用程序的后台服务器。服务器20可以是一台服务器,也可以是由多台服务器组成的服务器集群,或者是一个云计算服务中心。可选地,服务器20同时为多个客户端提供后台服务。
可选地,终端10和服务器20之间可通过网络进行互相通信。
下面,将结合几个实施例对本申请技术方案进行详细的介绍说明。
请参考图2,其示出了本申请一个实施例提供的针对二维图像的三维效果生成方法的流程图。该方法可应用于计算机设备中,如各步骤的执行主体可以是图1所示的三维效果生成系统中的服务器20或终端10。该方法可以包括以下几个步骤(201~203):
步骤201,获取二维图像对应的像素位移信息。
像素位移信息包括二维图像中各个像素点在目标图像中的计划位移量。其中,该计划位移量是指二维图像中单个像素点的位移距离,且该位移距离为浮点数(小数)。可选地,服务器在生成上述目标图像时,可以获取待处理的二维图像,并对该二维图像进行图像处理,确定该二维图像对应的像素位移信息,进而根据该像素位移信息,对二维图像中的各个像素值进行位移,生成上述二维图像对应的目标图像。需要说明的一点是,上述计划位移量与二维图像中的像素点具有一一对应的关系。
目标图像用于生成二维图像的三维效果,三维效果即立体效果,也就是说,目标图像能够在视觉上使得上述二维图像具有立体效果。可选地,服务器在生成二维图像对应的三维效果时,可以基于二维图像对应的像素位移信息确定二维图像对应的目标图像,进而采用该目标图像生成二维图像的三维效果,此时,终端上可以显示该目标图像,使得用户能够直接观看到二维图像的三维效果。
在本申请实施例中,服务器在确定生成针对二维图像的三维效果时,获取二维图像,并获取该二维图像对应的像素位移信息。其中,该二维图像可以是某个终端向服务器发送的图像,也可以是预先存储在服务器中的图像,本申请实施例对此不作限定。
需要说明的一点是,在本申请实施例中,上述像素位移信息的获取与深度信息有关。其中,深度信息用于指示二维图像中各个像素点与拍摄位置之间的距离。可选地,上述步骤201包括以下几个步骤:
1、获取二维图像对应的深度信息。
深度信息包括二维图像中各个像素点的深度值。可选地,该深度值可以用于指示二维图像中各个像素点与拍摄位置之间的距离。
在本申请实施例中,服务器在确定获取二维图像对应的像素位移信息时,获取该二维图像对应的深度信息,即获取该二维图像中各个像素点对应的深度值。在一种可能的实施方式中,上述深度信息通过图像处理获取。可选地,服务器在获取上述二维图像之后,对该二维图像进行图像处理,获取二维图像中各个像素点对应的深度值,进而确定二维图像对应的深度信息。在另一种可能的实施方式中,上述深度信息为二维图像自带的属性信息。可选地,服务器在获取上述二维图像之后,从该二维图像自带的属性信息中获取该二维图像对应的深度信息。
2、基于深度信息,确定二维图像对应的像素位移信息。
在本申请实施例中,服务器在获取上述深度信息之后,基于该深度信息,确定二维图像对应的像素位移信息。其中,像素位移信息中的计划位移量与深度信息中的深度值呈负相关关系,即针对二维图像中的目标像素点,该目标像素点的深度值越大则计划位移量越小,反之,该目标像素点的深度值越小则计划位移量越大。
可选地,在本申请实施例中,服务器在获取上述像素位移信息时,可以在深度信息的基础上,结合二维图像的拍摄参数获取上述像素位移信息。其中,该拍摄参数包括水平焦距参数和水平位移参数,该水平焦距参数和水平位移参数可以是通过二维图像的拍摄环境和拍摄相机获取的固定的参数。服务器在获取二维图像上的目标像素点的计划位移量时,可以将水平焦距参数和水平位移参数相乘,并除以目标像素点的深度值,进而确定该目标像素点的计划位移量。
步骤202,基于像素位移信息中的计划位移量,生成系数信息。
系数信息包括二维图像中各个像素点的加权系数,该加权系数可以用于指示针对各个像素点的影响参数。可选地,服务器在生成二维图像的三维效果时,可以从系数信息中确定各个像素点对于某个像素点的影响参数,进而根据系数信息,结合二维图像的像素值,生成二维图像对应的目标图像,并通过该目标图像使得二维图像具有三维效果。当然,在实际运用中,服务器也可以只从系数信息中确定相邻像素点和自身像素点对于某个像素点的影响参数,进而根据系数信息,结合二维图像的像素值,生成二维图像对应的目标图像,本申请实施例对此不作限定。其中,上述相邻像素点的数量可以是任意数值,如1、2、3 等,本申请实施例对此不作限定。可选地,服务器在确定目标像素点对应的相邻像素点时,可以将与目标像素点处于相同深度区域的像素点作为相邻像素点。
在本申请实施例中,服务器在获取上述像素位移信息之后,基于该像素位移信息,生成系数信息。可选地,服务器在生成上述系数信息时,从像素位移信息中确定各个像素点的计划位移量,并在该计划位移量的基础上,确定各个像素点针对某个像素点的影响参数,并根据这种方式对二维图像中的每个像素点进行遍历,进而生成上述系数信息。
在一种可能的实施方式中,服务器在获取上述像素位移信息之后,基于目标像素点的计划位移量,确定目标像素点在目标图像中的目标位置与计划位置,进而基于该目标位置与计划位置之间的距离,确定目标像素点的加权系数,此时,该目标像素点的加权系数是指目标像素点针对自身的加权系数。其中,目标位置是按照计划位移量的取整结果对目标像素点进行位移得到的,计划位置是按照计划位移量对目标像素点进行位移得到的。类似地,服务器在获取相邻像素点针对目标像素点的加权系数时,基于该目标像素点的计划位移量,确定目标像素点在目标图像中的目标位置,基于相邻像素点的计划位移量,确定相邻像素点在目标图像中的计划位置,进而基于该目标像素点的目标位置与该相邻像素点的计划位置之间的距离,确定相邻像素点针对该目标像素点的加权系数。
在另一种可能的实施方式中,服务器在获取上述像素位移信息之后,基于目标像素点的计划位移量,对该目标像素点的计划位移量进行取整,得到目标像素点的目标位移量,进而基于计划位移量与目标位移量之间的差值的绝对值,确定目标像素点的加权系数,此时,该目标像素点的加权系数是指目标像素点针对自身的加权系数。此时,服务器在获取相邻像素点针对目标像素点的加权系数时,基于该目标像素点的计划位移量,确定目标像素点在目标图像中的目标位置,基于相邻像素点的计划位移量,确定相邻像素点在目标图像中的计划位置,进而基于该目标像素点的目标位置与该相邻像素点的计划位置之间的距离,确定相邻像素点针对该目标像素点的加权系数。
其中,上述目标像素点可以是二维图像中的任意像素点,本申请实施例对此不作限定。
步骤203,对于二维图像中的目标像素点,基于目标像素点及其相邻像素点的像素值和加权系数,确定目标像素点在目标图像中的像素值。
在本申请实施例中,服务器在获取上述系数信息之后,在二维图像中各个像素点的像素值的基础上,结合该系数信息中的加权系数,来确定各个像素点在目标图像中的像素值,进而确定二维图像对应的目标图像。以某个像素点为例,对于二维图像中的目标像素点,服务器在获取上述系数信息之后,基于目标像素点及其相邻像素点的像素值和加权系数,确定目标像素点在目标图像中的像素值。进一步地,服务器以上述方法对二维图像中的每个像素点进行遍历,以此来获取上述二维图像对应的目标图像。
其中,上述目标像素点及其相邻像素点的像素值是指目标像素点在二维图像中的像素值,以及相邻像素点在二维图像中的像素值;上述目标像素点及其相邻像素点加权系数是指目标像素点针对自身的加权系数,以及相邻像素点针对目标像素点的加权系数。可选地,上述相邻像素点可以是分布在目标像素点周围区域的像素点,也可以是与目标像素点处于相同深度区域的像素点,还可以是分布在目标像素点周围区域且与目标像素点处于相同深度区域的像素点,本申请实施例对此不作限定。
综上所述,本申请实施例提供的技术方案中,通过二维图像的像素位移信息生成系数信息,并在确定二维图像对应的目标图像时,采用目标像素点及其相邻像素点的像素值和加权系数确定目标图像,其中,加权系数包含于系数信息中,也就是说,在确定用于展现二维图像的三维效果的目标图像时,通过目标像素点及其相邻像素点的像素值和加权系数确定目标像素点在目标图像中的像素值,对目标像素点的像素值进行平滑处理,保证目标图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,提升图像内容的平滑度和视觉效果。
另外,在确定目标像素点的加权系数时,通过目标像素点在目标图像中的计划位置和目标位置之间的距离来确定加权系数,且目标位置是按照计划位移量的取整结果对目标像素点进行位移得到的,计划位置是按照计划位移量对目标像素点进行位移得到的,考虑了由于像素位移信息四舍五入造成的目标图像不准确的问题,将四舍五入后造成的目标位置与计划位置之间的距离作为目标像素点的加权系数,保证后续目标图像生成的准确性,有效提高二维图像的三维效果的真实性。
可选地,在本申请实施例中,服务器可以根据上述目标位置与上述计划位置之间的位置关系,确定在获取目标图像的像素值时具体的加权方式。下面,以目标像素点为例,对目标图像中目标像素点的像素值的确定方式进行介绍。
在一种可能的实施方式中,目标像素点的计划位置位于目标位置的第一方向。在这种情况下,若目标像素点在目标图像中的计划位置位于目标位置的第一方向,则服务器基于目标像素点及其第二方向上的相邻像素点的像素值和加权系数,确定目标像素点在目标图像中的像素值。
可选地,在本申请实施例中,服务器在确定上述目标像素点的计划位置位于目标位置的第一方向,则将目标像素点的像素值与第二方向上的相邻像素点的加权系数相乘,得到第一数值;将第二方向上的相邻像素点的像素值与目标像素点的加权系数相乘,得到第二数值;将第一数值和第二数值之和,除以目标像素点的加权系数和第二方向上的相邻像素点的加权系数之和,得到目标像素点在目标图像中的像素值。
在另一种可能的实施方式中,目标像素点的计划位置位于目标位置的第二方向。在这种情况下,若目标像素点在目标图像中的计划位置位于目标位置的第二方向,则服务器基于目标像素点及其第一方向上的相邻像素点的像素值和加权系数,确定目标像素点在目标图像中的像素值。
可选地,在本申请实施例中,服务器在确定上述目标像素点的计划位置位于秒位置的第二方向,则将目标像素点的像素值与第一方向上的相邻像素点的加权系数相乘,得到第三数值;将第一方向上的相邻像素点的像素值与目标像素点的加权系数相乘,得到第四数值;将第三数值和第四数值之和,除以目标像素点的加权系数和第一方向上的相邻像素点的加权系数之和,得到目标像素点在目标图像中的像素值。
其中,上述目标位置是按照计划位移量的取整结果对目标像素点进行位移得到的,计划位置是按照计划位移量对目标像素点进行位移得到的。
需要说明的一点是,上述第一方向和上述第二方向是相反方向。例如,若第一方向为左侧方向,则第二方向为右侧方向;若第一方向为右侧方向,则第二方向为左侧方向。上述目标像素点的像素值是指目标像素点在二维图像中的像素值。上述相邻像素点的像素值是指相邻像素点在二维图像中的像素值。上述目标像素点的加权系数是指目标像素点针对自身的加权系数。上述相邻像素点的加权系数是指相邻像素点针对目标像素点的加权系数。
示例性地,结合参考图3,对本申请中目标图像中像素值的确定方式进行完整介绍。首先,服务器在获取二维图像之后,基于二维图像的深度信息确定二维图像对应的像素位移信息,进而基于像素位移信息确定各个像素点的计划位置与目标位置之间的距离,生成系数信息。其中,计划位置是按照像素位置信息中的计划位移量对目标像素点进行位移得到的,目标位置是按照计划位移量的取整结果对目标像素点进行位移得到的。之后,服务器根据像素点的计划位置与目标位置之间的位置关系,确定像素点的加权方式。若像素点的计划位置位于目标位置的第一方向,则基于像素点及其第二方向上的相邻像素点的加权系数,结合像素点及其第二方向上的相邻像素点在二维图像中的像素值,确定像素点在目标图像中的像素值。若像素点的计划位置位于目标位置的第二方向,则基于像素点及其第一方向上的相邻像素点的加权系数,结合像素点及其第一方向上的相邻像素点在二维图像中的像素值,确定像素点在目标图像中的像素值。其中,上述第一方向和上述第二方向是相反方向。
可选地,在本申请实施例中,上述目标像素点对应的相邻像素点可以包括与目标像素点处于同一深度区域的相邻像素点,以及与目标像素点处于不同深度区域的相邻像素点。在这种情况下,若目标像素点与相邻像素点属于同一深度区域,则服务器可以执行上述对于二维图像中的目标像素点,基于目标像素点及其相邻像素点的像素值和加权系数,确定目标像素点在目标图像中的像素值的步骤;若目标像素点与相邻像素点不属于同一深度区域,则服务器可以将目标像素点在二维图像中的像素值,确定为目标像素点在目标图像中的像素值。
请参考图4,其示出了本申请另一个实施例提供的针对二维图像的三维效果生成方法的流程图。该方法可应用于计算机设备中,如各步骤的执行主体可以是图1所示的三维效果生成系统中的服务器20或终端10。该方法可以包括以下几个步骤(401~404):
步骤401,获取二维图像对应的像素位移信息。
步骤402,基于像素位移信息中的计划位移量,生成系数信息。
步骤403,在目标像素点与相邻像素点属于同一深度区域的情况下,对于二维图像中的目标像素点,基于目标像素点及其相邻像素点的像素值和加权系数,确定目标像素点在目标图像中的像素值。
步骤404,在目标像素点与相邻像素点不属于同一深度区域的情况下,将目标像素点在二维图像中的像素值,确定为目标像素点在目标图像中的像素值。
可选地,在本申请实施例中,上述目标图像包括左眼图像和右眼图像,服务器可以通过左眼图像和右眼图像使用户产生视觉误差,进而用户可以根据该视觉误差,体验到二维图像的三维效果。其中,左眼图像是指以左眼为基础获取的图像,右眼图像是指以右眼为基础获取的图像。下面,对左眼图像和右眼图像的生成方式进行介绍。
请参考图5,其示出了本申请再一个实施例提供的针对二维图像的三维效果生成方法的流程图。该方法可应用于计算机设备中,如各步骤的执行主体可以是图1所示的三维效果生成系统中的服务器20或终端10,本申请实施例以该方法由服务器执行为例进行说明。该方法可以包括以下几个步骤(501~503):
步骤501,获取二维图像对应的左眼像素位移信息和右眼像素位移信息。
左眼像素位移信息包括二维图像中各个像素点在左眼图像中的计划位移量。右眼像素位移信息包括二维图像中各个像素点在右眼图像中的计划位移量。
在本申请实施例中,服务器在确定生成针对二维图像的三维效果时,获取二维图像,并获取该二维图像对应的左眼像素位移信息和右眼像素位移信息。可选地,服务器可以根据二维图像的深度信息,结合二维图像的拍摄参数获取上述左眼像素位移信息和右眼像素位移信息。其中,由于左眼和右眼之间的对称性,上述左眼像素位移信息和上述右眼像素位移信息中的计划位移量相同,而计划位移量的位移方向相反。
示例性地,假设拍摄参数的水平焦距参数为fx,拍摄参数中的水平位移参数为tx,则左(右)眼像素位移信息中x点的计划位移量dx_floatx,x-1点的计划位移量dx_floatx-1,x+1点的计划位移量dx_floatx+1分别为:
Figure BDA0002939294980000131
Figure BDA0002939294980000132
Figure BDA0002939294980000133
其中,zx表示x点的深度值,zx-1表示x-1点的深度值,zx+1表示x+1点的深度值,且x-1点位于x点的左侧,x+1点位于x点的右侧。
需要说明的一点是,本申请中提到的像素位移信息均是指像素点的水平位移信息,在实际运用中,服务器需要通过水平位移信息确定像素点的水平坐标,并结合像素点的垂直坐标来确定像素点在目标图像上的位置,在本申请中,像素点在目标图像(左眼图像和右眼图像)上的垂直坐标与在二维图像上的垂直坐标相同。
步骤502,基于左眼像素位移信息中的计划位移量生成左眼系数信息,以及基于右眼像素位移信息中的计划位移量生成右眼系数信息。
左眼系数信息包括二维图像中各个像素点的左眼加权系数。右眼系数信息包括二维图像中各个像素点的右眼加权系数。
在本申请实施例中,服务器在获取上述左眼像素位移信息和上述右眼位移信息之后,基于该左眼像素位移信息生成左眼系数信息,并基于该右眼像素位移信息生成右眼系数信息。
对于上述左眼位移信息,可选地,服务器在获取左眼像素位移信息之后,基于目标像素点在左眼图像中的计划位移量,确定目标像素点在左眼图像中的目标位置与计划位置,进而基于该目标位置与计划位置之间的距离,确定目标像素点的加权系数,此时,该目标像素点的加权系数是指目标像素点在左眼图像中针对自身的加权系数。类似地,服务器在获取相邻像素点在左眼图像中针对目标像素点的加权系数时,基于该目标像素点在左眼图像中的计划位移量,确定目标像素点在左眼图像中的目标位置,基于相邻像素点在左眼图像中的计划位移量,确定相邻像素点在左眼图像中的计划位置,进而基于该目标像素点在左眼图像中的目标位置与该相邻像素点在左眼图像中的计划位置之间的距离,确定相邻像素点在左眼图像中针对该目标像素点的加权系数。
示例性地,假设左眼像素位移信息中x点的计划位移量为dx_floatx,x-1点的计划位移量为dx_floatx-1,x+1点的计划位移量为dx_floatx+1,则x点在左眼图像中的计划位置为x+dx_floatx,目标位置为x+dxx,dxx是通过dx_floatx取整获取的;x-1点在左眼图像中的计划位置为x-1+dx_floatx-1,目标位置为x-1+dxx-1, dxx-1是通过dx_floatx-1取整获取的;x+1点在左眼图像中的计划位置为x+1+ dx_floatx+1,目标位置为x+1+dxx+1,dxx+1是通过dx_floatx+1取整获取的。此时,目标像素点在左眼图像中针对自身的加权系数coex、左侧相邻像素点x-1在左眼图像中针对目标像素点的加权系数coe_lx-1、右侧相邻像素点x+1在左眼图像中针对目标像素点的加权系数coe_lx+1分别为:
coex=|dxx-dx_floatx|;
coe_lx-1=|dx_floatx-1-dxx-1|;
coe_lx+1=|dx_floatx+1-dxx+1|。
对于上述右眼位移信息,可选地,服务器在获取右眼像素位移信息之后,基于目标像素点在右眼图像中的计划位移量,确定目标像素点在右眼图像中的目标位置与计划位置,进而基于该目标位置与计划位置之间的距离,确定目标像素点的加权系数,此时,该目标像素点的加权系数是指目标像素点在右眼图像中针对自身的加权系数。类似地,服务器在获取相邻像素点在右眼图像中针对目标像素点的加权系数时,基于该目标像素点在右眼图像中的计划位移量,确定目标像素点在右眼图像中的目标位置,基于相邻像素点在右眼图像中的计划位移量,确定相邻像素点在右眼图像中的计划位置,进而基于该目标像素点在右眼图像中的目标位置与该相邻像素点在右眼图像中的计划位置之间的距离,确定相邻像素点在右眼图像中针对该目标像素点的加权系数。
示例性地,假设右眼像素位移信息中x点的计划位移量为dx_floatx,x-1点的计划位移量为dx_floatx-1,x+1点的计划位移量为dx_floatx+1,则x点在右眼图像中的计划位置为x-dx_floatx,目标位置为x-dxx,dxx是通过dx_floatx取整获取的;x-1点在右眼图像中的计划位置为x-1-dx_floatx-1,目标位置为x-1-dxx-1,dxx-1是通过dx_floatx-1取整获取的;x+1点在右眼图像中的计划位置为 x+1-dx_floatx+1,目标位置为x+1-dxx+1,dxx+1是通过dx_floatx+1取整获取的。此时,目标像素点在右眼图像中针对自身的加权系数coex、左侧相邻像素点x-1在右眼图像中针对目标像素点的加权系数coe_rx-1、右侧相邻像素点x+1在右眼图像中针对目标像素点的加权系数coe_rx+1分别为:
coex=|dxx-dx_floatx|;
coe_rx-1=|dxx-dx_floatx-1-1|;
coe_rx+1=|dxx-dx_floatx+1+1|。
步骤503,对于二维图像中的目标像素点,基于目标像素点及其相邻像素点的像素值和左眼加权系数,确定目标像素点在左眼图像中的像素值;以及,对于二维图像中的目标像素点,基于目标像素点及其相邻像素点的像素值和右眼加权系数,确定目标像素点在右眼图像中的像素值。
在本申请实施例中,服务器在获取上述左眼系数信息和上述右眼系数信息之后,在二维图像中各个像素点的像素值的基础上,结合左眼系数信息中的左眼加权系数,来确定各个像素点在左眼图像中的像素值,并结合右眼系数信息中的右眼加权系数,来确定各个像素点在右眼图像中的像素值。
以某个像素点为例,对于二维图像中的目标像素点,服务器在获取上述左眼系数信息和上述右眼系数信息之后,基于目标像素点及其相邻像素点的像素值和左眼加权系数,确定目标像素点在左眼图像中的像素值,并基于目标像素点及其相邻像素点的像素值和右眼加权系数,确定目标像素点在右眼图像中的像素值。进一步地,服务器以上述方法对二维图像中的每个像素点进行遍历,以此来获取上述二维图像对应的左眼图像和右眼图像。
其中,上述目标像素点及其相邻像素点的像素值是指目标像素点在二维图像中的像素值,以及相邻像素点在二维图像中的像素值;上述目标像素点及其相邻像素点的左眼加权系数是指目标像素点针对自身的左眼加权系数,以及相邻像素点针对目标像素点的左眼加权系数;上述目标像素点及其相邻像素点的右眼加权系数是指目标像素点针对自身的右眼加权系数,以及相邻像素点针对目标像素点的右眼加权系数。
可选地,在本申请实施例中,服务器可以根据上述目标像素点在左眼图像中的目标位置与计划位置之间的位置关系,确定在获取左眼图像的像素值时具体的加权方式。
示例性地,如图6所示,在左眼图像中,若dx_floatx>dxx,x点在左眼图像中的计划位置位于目标位置的右侧,此时,服务器基于x点及其左侧相邻像素点x-1的像素值和左眼加权系数,确定x点在左眼图像中的像素值img_lx为:
Figure BDA0002939294980000161
若dx_floatx<dxx,x点在左眼图像中的计划位置位于目标位置的左侧,此时,服务器基于x点及其右侧相邻像素点x-1的像素值和左眼加权系数,确定x点在左眼图像中的像素值img_lx为:
Figure BDA0002939294980000162
其中,orgx表示x点在二维图像中的像素值,orgx-1表示x-1点在二维图像中的像素值,orgx+1表示x+1点在二维图像中的像素值。
示例性地,如图7所示,在右眼图像中,若dx_floatx>dxx,x点在右眼图像中的计划位置位于目标位置的左侧,此时,服务器基于x点及其右侧相邻像素点x+1的像素值和右眼加权系数,确定x点在右眼图像中的像素值img_rx为:
Figure BDA0002939294980000163
若dx_floatx<dx,x点在右眼图像中的计划位置位于目标位置的右侧,此时,服务器基于x点及其左侧相邻像素点x-1的像素值和右眼加权系数,确定x点在右眼图像中的像素值img_rx为:
Figure BDA0002939294980000164
其中,orgx表示x点在二维图像中的像素值,orgx-1表示x-1点在二维图像中的像素值,orgx+1表示x+1点在二维图像中的像素值。
综上所述,本申请实施例提供的技术方案中,通过二维图像的像素位移信息生成左眼(右眼)系数信息,并在确定二维图像对应的左眼(右眼)图像时,采用目标像素点及其相邻像素点的像素值和左眼(右眼)加权系数确定左眼(右眼)图像,其中,左眼(右眼)加权系数包含于左眼(右眼)系数信息中,也就是说,在确定用于展现二维图像的三维效果的左眼(右眼)图像时,通过目标像素点及其相邻像素点的像素值和左眼(右眼)加权系数确定目标像素点在左眼(右眼)图像中的像素值,对目标像素点的像素值进行平滑处理,保证左眼(右眼)图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,提升左眼(右眼)图像内容的平滑度和视觉效果。
请参考图8,其示出了本申请一个实施例提供的针对二维图像的三维效果显示方法的流程图。该方法可应用于计算机设备中,如各步骤的执行主体可以是图1所示的三维效果生成系统中的终端10。该方法可以包括以下几个步骤 (801~802):
步骤801,获取二维图像对应的目标图像;
步骤802,显示目标图像。
目标图像用于生成二维图像的三维效果。可选地,终端可以通过在界面中显示该目标图像,来实现显示二维图像的三维效果。
在本申请实施例中,终端在确定显示二维图像的三维效果时,获取该二维图像对应的目标图像,进而在界面中显示该目标图像。其中,上述二维图像中的目标像素点在目标图像中的像素值,是基于目标像素点及其相邻像素点的像素值和加权系数确定的,目标像素点及其相邻像素点的加权系数是基于目标像素点及其相邻像素点在目标图像中的计划位移量确定的,具体如上文所述,在此不作赘述。
可选地,上述目标图像中包括左眼图像和右眼图像,终端可以同时显示左眼图像和右眼图像来造成用户的视觉误差,进而用户根据该视觉误差会产生针对二维图像的三维效果。
综上所述,本申请实施例提供的技术方案中,通过二维图像的像素位移信息生成系数信息,并在确定二维图像对应的目标图像时,采用目标像素点及其相邻像素点的像素值和加权系数确定目标图像,对目标像素点的像素值进行平滑处理,保证目标图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,提升图像内容的平滑度和视觉效果。
示例性地,结合参考图9,对相关技术中的针对二维图像的三维效果生成方法,以及本申请中的针对二维图像的三维效果生成方法进行比较。
在相关技术中,服务器在获取像素位移信息91之后,对像素位移信息进行四舍五入取整,得到四舍五入后的像素位移信息92,此时,计划位移量为8.4990 的这行像素点与计划位移量为8.5010的这行像素点相邻,其本该映射到目标图像的相邻位置,但是上一行点因四舍五入位移了8个像素,下一行点因四舍五入位移了9个像素,这1个像素的位移差导致最终左右眼图像产生了条纹扭曲,最终呈现的效果如效果图(图9中93)中的视觉断层94。
在本申请提供的技术方案中,服务器在确定用于展现二维图像的三维效果的目标图像时,通过目标像素点及其相邻像素点的像素值和加权系数确定目标像素点在目标图像中的像素值,且在确定目标像素点的加权系数时,通过目标像素点在目标图像中的计划位置和目标位置之间的距离来确定目标像素点的加权系数,目标位置是按照计划位移量的取整结果对目标像素点进行位移得到的,计划位置是按照计划位移量对目标像素点进行位移得到的,考虑了由于像素位移信息取整造成的目标图像不准确的问题,将取整后造成的目标位置与计划位置之间的距离作为目标像素点的加权系数,结合相邻像素点对目标像素点的像素值进行加权调整,对目标像素点的像素值进行平滑处理,保证目标图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,提升图像内容的平滑度和视觉效果,最终呈现效果如效果图(图9中95)所示,未出现视觉断层。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
请参考图10,其示出了本申请一个实施例提供的针对二维图像的三维效果生成装置的框图。该装置具有实现上述针对二维图像的三维效果生成方法的功能。该装置1000可以包括:位移获取模块1010、系数生成模块1020和像素确定模块1030。
位移获取模块1010,用于获取二维图像对应的像素位移信息,所述像素位移信息包括所述二维图像中各个像素点在目标图像中的计划位移量;其中,所述目标图像用于生成所述二维图像的三维效果。
系数生成模块1020,用于基于所述像素位移信息中的计划位移量,生成系数信息,所述系数信息包括所述二维图像中各个像素点的加权系数。
像素确定模块1030,用于对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值。
在示例性实施例中,所述系数生成模块1020,用于基于所述目标像素点的计划位移量,确定所述目标像素点在所述目标图像中的目标位置与计划位置;其中,所述目标位置是按照所述计划位移量的取整结果对所述目标像素点进行位移得到的,所述计划位置是按照所述计划位移量对所述目标像素点进行位移得到的;基于所述目标位置与所述计划位置之间的距离,确定所述目标像素点的加权系数。
在示例性实施例中,如图11所示,所述像素确定模块1030,包括:第一确定单元1031和第二确定单元1032。
第一确定单元1031,用于若所述目标像素点在所述目标图像中的计划位置位于目标位置的第一方向,则基于所述目标像素点及其第二方向上的相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值。
第二确定单元1032,用于若所述目标像素点在所述目标图像中的计划位置位于目标位置的第二方向,则基于所述目标像素点及其第一方向上的相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值。
其中,所述目标位置是按照所述计划位移量的取整结果对所述目标像素点进行位移得到的,所述计划位置是按照所述计划位移量对所述目标像素点进行位移得到的。
在示例性实施例中,所述第一确定单元1031,用于将所述目标像素点的像素值与所述第二方向上的相邻像素点的加权系数相乘,得到第一数值;将所述第二方向上的相邻像素点的像素值与所述目标像素点的加权系数相乘,得到第二数值;将所述第一数值和所述第二数值之和,除以所述目标像素点的加权系数和所述第二方向上的相邻像素点的加权系数之和,得到所述目标像素点在所述目标图像中的像素值。
在示例性实施例中,所述第二确定单元1032,用于将所述目标像素点的像素值与所述第一方向上的相邻像素点的加权系数相乘,得到第三数值;将所述第一方向上的相邻像素点的像素值与所述目标像素点的加权系数相乘,得到第四数值;将所述第三数值和所述第四数值之和,除以所述目标像素点的加权系数和所述第一方向上的相邻像素点的加权系数之和,得到所述目标像素点在所述目标图像中的像素值。
在示例性实施例中,所述位移获取模块1010,用于获取所述二维图像对应的深度信息,所述深度信息包括所述二维图像中各个像素点的深度值;基于所述深度信息,确定所述二维图像对应的所述像素位移信息;其中,所述计划位移量与所述深度值呈负相关关系。
在示例性实施例中,所述像素确定模块1030,还用于所述在所述目标像素点与所述相邻像素点属于同一深度区域的情况下,执行所述对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值的步骤;在所述目标像素点与所述相邻像素点不属于同一深度区域的情况下,将所述目标像素点在所述二维图像中的像素值,确定为所述目标像素点在所述目标图像中的像素值。
在示例性实施例中,所述目标图像包括左眼图像和右眼图像。
所述位移获取模块1010,还用于获取所述二维图像对应的左眼像素位移信息和右眼像素位移信息;其中,所述左眼像素位移信息包括所述二维图像中各个像素点在所述左眼图像中的计划位移量,所述右眼像素位移信息包括所述二维图像中各个像素点在所述右眼图像中的计划位移量。
系数生成模块1020,还用于基于所述左眼像素位移信息中的计划位移量生成左眼系数信息,以及基于所述右眼像素位移信息中的计划位移量生成右眼系数信息;其中,所述左眼系数信息包括所述二维图像中各个像素点的左眼加权系数,所述右眼系数信息包括所述二维图像中各个像素点的右眼加权系数。
像素确定模块1030,还用于对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和左眼加权系数,确定所述目标像素点在所述左眼图像中的像素值;以及,对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和右眼加权系数,确定所述目标像素点在所述右眼图像中的像素值。
综上所述,本申请实施例提供的技术方案中,通过二维图像的像素位移信息生成系数信息,并在确定二维图像对应的目标图像时,采用目标像素点及其相邻像素点的像素值和加权系数确定目标图像,其中,加权系数包含于系数信息中,也就是说,在确定用于展现二维图像的三维效果的目标图像时,通过目标像素点及其相邻像素点的像素值和加权系数确定目标像素点在目标图像中的像素值,对目标像素点的像素值进行平滑处理,保证目标图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,提升图像内容的平滑度和视觉效果。
请参考图12,其示出了本申请一个实施例提供的针对二维图像的三维效果显示装置的框图。该装置1200可以包括:图像获取模块1210和目标显示模块 1220。
图像获取模块1210,用于获取二维图像对应的目标图像,所述目标图像用于生成所述二维图像的三维效果。
目标显示模块1220,用于显示所述目标图像;其中,所述二维图像中的目标像素点在所述目标图像中的像素值,是基于所述目标像素点及其相邻像素点的像素值和加权系数确定的,所述目标像素点的加权系数是基于所述目标像素点在所述目标图像中的计划位移量确定的。
综上所述,本申请实施例提供的技术方案中,通过二维图像的像素位移信息生成系数信息,并在确定二维图像对应的目标图像时,采用目标像素点及其相邻像素点的像素值和加权系数确定目标图像,对目标像素点的像素值进行平滑处理,保证目标图像生成的准确性,减轻因(具有相同或相近像素值的)像素点在位置上不连续而导致的视觉断层现象,提升图像内容的平滑度和视觉效果。
需要说明的是,上述实施例提供的装置,在实现其功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的装置与方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
请参考图13,其示出了本申请一个实施例提供的服务器的结构框图。该服务器可用于实现上述针对二维图像的三维效果生成方法的功能。该服务器可以是图1所示的三维效果生成系统中的服务器20。具体来讲:
服务器1300包括中央处理单元(Central Processing Unit,CPU)1301、包括随机存取存储器(Random Access Memory,RAM)1302和只读存储器(Read Only Memory,ROM)1303的系统存储器1304,以及连接系统存储器1304和中央处理单元1301的系统总线1305。可选地,服务器1300还包括帮助计算机内的各个器件之间传输信息的基本输入/输出系统(Input/Output,I/O系统)1306,和用于存储操作系统1313、应用程序1314和其他程序模块1315的大容量存储设备1307。
基本输入/输出系统1306可以包括有用于显示信息的显示器1308(如外接显示器)和用于用户输入信息的诸如鼠标、键盘之类的输入设备1309。其中显示器1308和输入设备1309都可以通过连接到系统总线1305的输入输出控制器 1310连接到中央处理单元1301。基本输入/输出系统1306还可以包括输入输出控制器1310以用于接收和处理来自键盘、鼠标、或电子触控笔等多个其他设备的输入。类似地,输入输出控制器1310还提供输出到显示屏、打印机或其他类型的输出设备。
大容量存储设备1307通过连接到系统总线1305的大容量存储控制器(未示出)连接到中央处理单元1301。大容量存储设备1307及其相关联的计算机可读介质为服务器1300提供非易失性存储。也就是说,大容量存储设备1307可以包括诸如硬盘或者CD-ROM(Compact Disc Read-Only Memory,只读光盘) 驱动器之类的计算机可读介质(未示出)。
不失一般性,计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括RAM、ROM、EPROM(Erasable Programmable Read Only Memory,可擦除可编程只读存储器)、EEPROM(Electrically Erasable Programmable Read Only Memory,电可擦可编程只读存储器)、闪存或其他固态存储其技术,CD-ROM、DVD(Digital Video Disc,高密度数字视频光盘)或其他光学存储、磁带盒、磁带、磁盘存储或其他磁性存储设备。当然,本领域技术人员可知计算机存储介质不局限于上述几种。上述的系统存储器1304和大容量存储设备1307可以统称为存储器。
根据本申请的各种实施例,服务器1300还可以通过诸如因特网等网络连接到网络上的远程计算机运行。也即服务器1300可以通过连接在系统总线1305 上的网络接口单元1311连接到网络1312,或者说,也可以使用网络接口单元 1311来连接到其他类型的网络或远程计算机系统(未示出)。
所述存储器还包括计算机程序,该计算机程序存储于存储器中,且经配置以由一个或者一个以上处理器执行,以实现上述针对二维图像的三维效果生成方法。
本领域技术人员可以理解,图13中示出的结构并不构成对服务器1300的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
请参考图14,其示出了本申请一个实施例提供的终端1400的结构框图。该终端用于实施上述实施例中提供的针对二维图像的三维效果显示方法,或者,该终端用于实施上述实施例中提供的针对二维图像的三维效果生成方法。该终端可以是图1所示三维效果生成系统中的终端10。具体来讲:
通常,终端1400包括有:处理器1401和存储器1402。
处理器1401可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1401可以采用DSP(Digital Signal Processing,数字信号处理)、 FPGA(FieldProgrammable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1401也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器 1401可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1401还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1402可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1402还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1402中的非暂态的计算机可读存储介质用于存储至少一个指令,至少一段程序、代码集或指令集,所述至少一条指令、至少一段程序、代码集或指令集,且经配置以由一个或者一个以上处理器执行,以实现上述针对二维图像的三维效果显示方法,或实现上述针对二维图像的三维效果生成方法。
在一些实施例中,终端1400还可选包括有:外围设备接口1403和至少一个外围设备。处理器1401、存储器1402和外围设备接口1403之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1403相连。具体地,外围设备包括:射频电路1404、显示屏1405、摄像头组件1406、音频电路1407、定位组件1408和电源1409中的至少一种。
本领域技术人员可以理解,图14中示出的结构并不构成对终端1400的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
在示例性实施例中,还提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或所述指令集在被处理器执行时以实现上述针对二维图像的三维效果生成方法,或实现上述针对二维图像的三维效果显示方法。
可选地,该计算机可读存储介质可以包括:ROM(Read Only Memory,只读存储器)、RAM(Random Access Memory,随机存取记忆体)、SSD(Solid State Drives,固态硬盘)或光盘等。其中,随机存取记忆体可以包括ReRAM(Resistance Random Access Memory,电阻式随机存取记忆体)和DRAM(Dynamic Random Access Memory,动态随机存取存储器)。
在示例性实施例中,还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述针对二维图像的三维效果生成方法,或执行上述针对二维图像的三维效果显示方法。
应当理解的是,在本文中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。另外,本文中描述的步骤编号,仅示例性示出了步骤间的一种可能的执行先后顺序,在一些其它实施例中,上述步骤也可以不按照编号顺序来执行,如两个不同编号的步骤同时执行,或者两个不同编号的步骤按照与图示相反的顺序执行,本申请实施例对此不作限定。
以上所述仅为本申请的示例性实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (15)

1.一种针对二维图像的三维效果生成方法,其特征在于,所述方法包括:
获取二维图像对应的像素位移信息,所述像素位移信息包括所述二维图像中各个像素点在目标图像中的计划位移量;其中,所述目标图像用于生成所述二维图像的三维效果;
基于所述像素位移信息中的计划位移量,生成系数信息,所述系数信息包括所述二维图像中各个像素点的加权系数;
对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值。
2.根据权利要求1所述的方法,其特征在于,所述基于所述像素位移信息中的计划位移量,生成系数信息,包括:
基于所述目标像素点的计划位移量,确定所述目标像素点在所述目标图像中的目标位置与计划位置;其中,所述目标位置是按照所述计划位移量的取整结果对所述目标像素点进行位移得到的,所述计划位置是按照所述计划位移量对所述目标像素点进行位移得到的;
基于所述目标位置与所述计划位置之间的距离,确定所述目标像素点的加权系数。
3.根据权利要求1所述的方法,其特征在于,所述对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值,包括:
若所述目标像素点在所述目标图像中的计划位置位于目标位置的第一方向,则基于所述目标像素点及其第二方向上的相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值;
若所述目标像素点在所述目标图像中的计划位置位于目标位置的第二方向,则基于所述目标像素点及其第一方向上的相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值;
其中,所述目标位置是按照所述计划位移量的取整结果对所述目标像素点进行位移得到的,所述计划位置是按照所述计划位移量对所述目标像素点进行位移得到的。
4.根据权利要求3所述的方法,其特征在于,所述基于所述目标像素点及其第二方向上的相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值,包括:
将所述目标像素点的像素值与所述第二方向上的相邻像素点的加权系数相乘,得到第一数值;
将所述第二方向上的相邻像素点的像素值与所述目标像素点的加权系数相乘,得到第二数值;
将所述第一数值和所述第二数值之和,除以所述目标像素点的加权系数和所述第二方向上的相邻像素点的加权系数之和,得到所述目标像素点在所述目标图像中的像素值。
5.根据权利要求3所述的方法,其特征在于,所述基于所述目标像素点及其第一方向上的相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值,包括:
将所述目标像素点的像素值与所述第一方向上的相邻像素点的加权系数相乘,得到第三数值;
将所述第一方向上的相邻像素点的像素值与所述目标像素点的加权系数相乘,得到第四数值;
将所述第三数值和所述第四数值之和,除以所述目标像素点的加权系数和所述第一方向上的相邻像素点的加权系数之和,得到所述目标像素点在所述目标图像中的像素值。
6.根据权利要求1所述的方法,其特征在于,所述获取二维图像对应的像素位移信息,包括:
获取所述二维图像对应的深度信息,所述深度信息包括所述二维图像中各个像素点的深度值;
基于所述深度信息,确定所述二维图像对应的所述像素位移信息;其中,所述计划位移量与所述深度值呈负相关关系。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述目标像素点与所述相邻像素点属于同一深度区域的情况下,执行所述对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值的步骤;
在所述目标像素点与所述相邻像素点不属于同一深度区域的情况下,将所述目标像素点在所述二维图像中的像素值,确定为所述目标像素点在所述目标图像中的像素值。
8.根据权利要求1至7任一项所述的方法,其特征在于,所述目标图像包括左眼图像和右眼图像;
所述获取二维图像对应的像素位移信息,包括:
获取所述二维图像对应的左眼像素位移信息和右眼像素位移信息;其中,所述左眼像素位移信息包括所述二维图像中各个像素点在所述左眼图像中的计划位移量,所述右眼像素位移信息包括所述二维图像中各个像素点在所述右眼图像中的计划位移量。
9.根据权利要求8所述的方法,其特征在于,所述基于所述像素位移信息中的计划位移量,生成系数信息,包括:
基于所述左眼像素位移信息中的计划位移量生成左眼系数信息,以及基于所述右眼像素位移信息中的计划位移量生成右眼系数信息;其中,所述左眼系数信息包括所述二维图像中各个像素点的左眼加权系数,所述右眼系数信息包括所述二维图像中各个像素点的右眼加权系数。
10.根据权利要求8所述的方法,其特征在于,所述对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值,包括:
对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和左眼加权系数,确定所述目标像素点在所述左眼图像中的像素值;
以及,对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和右眼加权系数,确定所述目标像素点在所述右眼图像中的像素值。
11.一种针对二维图像的三维效果显示方法,其特征在于,所述方法包括:
获取二维图像对应的目标图像,所述目标图像用于生成所述二维图像的三维效果;
显示所述目标图像;
其中,所述二维图像中的目标像素点在所述目标图像中的像素值,是基于所述目标像素点及其相邻像素点的像素值和加权系数确定的,所述目标像素点的加权系数是基于所述目标像素点在所述目标图像中的计划位移量确定的。
12.一种针对二维图像的三维效果生成装置,其特征在于,所述装置包括:
位移获取模块,用于获取二维图像对应的像素位移信息,所述像素位移信息包括所述二维图像中各个像素点在目标图像中的计划位移量;其中,所述目标图像用于生成所述二维图像的三维效果;
系数生成模块,用于基于所述像素位移信息中的计划位移量,生成系数信息,所述系数信息包括所述二维图像中各个像素点的加权系数;
像素确定模块,用于对于所述二维图像中的目标像素点,基于所述目标像素点及其相邻像素点的像素值和加权系数,确定所述目标像素点在所述目标图像中的像素值。
13.一种针对二维图像的三维效果显示装置,其特征在于,所述装置包括:
图像获取模块,用于获取二维图像对应的目标图像,所述目标图像用于生成所述二维图像的三维效果;
目标显示模块,用于显示所述目标图像;其中,所述二维图像中的目标像素点在所述目标图像中的像素值,是基于所述目标像素点及其相邻像素点的像素值和加权系数确定的,所述目标像素点的加权系数是基于所述目标像素点在所述目标图像中的计划位移量确定的。
14.一种计算机设备,其特征在于,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至10任一项所述的针对二维图像的三维效果生成方法,或实现如权利要求11所述的针对二维图像的三维效果显示方法。
15.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求1至10任一项所述的针对二维图像的三维效果生成方法,或实现如权利要求11所述的针对二维图像的三维效果显示方法。
CN202110172749.4A 2021-02-08 2021-02-08 针对二维图像的三维效果生成方法、装置、设备及介质 Pending CN113592990A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110172749.4A CN113592990A (zh) 2021-02-08 2021-02-08 针对二维图像的三维效果生成方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110172749.4A CN113592990A (zh) 2021-02-08 2021-02-08 针对二维图像的三维效果生成方法、装置、设备及介质

Publications (1)

Publication Number Publication Date
CN113592990A true CN113592990A (zh) 2021-11-02

Family

ID=78238080

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110172749.4A Pending CN113592990A (zh) 2021-02-08 2021-02-08 针对二维图像的三维效果生成方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN113592990A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116907677A (zh) * 2023-09-15 2023-10-20 山东省科学院激光研究所 用于混凝土结构的分布式光纤温度传感系统及其测量方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116907677A (zh) * 2023-09-15 2023-10-20 山东省科学院激光研究所 用于混凝土结构的分布式光纤温度传感系统及其测量方法
CN116907677B (zh) * 2023-09-15 2023-11-21 山东省科学院激光研究所 用于混凝土结构的分布式光纤温度传感系统及其测量方法

Similar Documents

Publication Publication Date Title
US11538229B2 (en) Image processing method and apparatus, electronic device, and computer-readable storage medium
CN111369681B (zh) 三维模型的重构方法、装置、设备及存储介质
US11748934B2 (en) Three-dimensional expression base generation method and apparatus, speech interaction method and apparatus, and medium
CN106846497B (zh) 应用于终端的呈现三维地图的方法和装置
US20230072627A1 (en) Gaze correction method and apparatus for face image, device, computer-readable storage medium, and computer program product face image
CN108833877B (zh) 图像处理方法及装置、计算机装置及可读存储介质
CN108805979A (zh) 一种动态模型三维重建方法、装置、设备和存储介质
JP2023545190A (ja) 画像の視線補正方法、装置、電子機器、及びコンピュータプログラム
CN111161398B (zh) 一种图像生成方法、装置、设备及存储介质
CN111192223B (zh) 人脸纹理图像的处理方法、装置、设备及存储介质
CN108230384A (zh) 图像深度计算方法、装置、存储介质和电子设备
CN113643414B (zh) 一种三维图像生成方法、装置、电子设备及存储介质
CN110807379A (zh) 一种语义识别方法、装置、以及计算机存储介质
CN114742703A (zh) 双目立体全景图像的生成方法、装置、设备和存储介质
CN113592990A (zh) 针对二维图像的三维效果生成方法、装置、设备及介质
WO2021120578A1 (zh) 神经网络的前向计算方法、装置及计算机可读存储介质
CN109816791B (zh) 用于生成信息的方法和装置
CN115222917A (zh) 三维重建模型的训练方法、装置、设备及存储介质
KR101163020B1 (ko) 3차원 모델을 스케일링하는 방법 및 스케일링 유닛
CN113205579A (zh) 三维重建方法、装置、设备及存储介质
CN117197319B (zh) 图像生成方法、装置、电子设备及存储介质
CN116723303B (zh) 画面投影方法、装置、设备及存储介质
WO2023179091A1 (zh) 三维模型渲染方法、装置、设备、存储介质及程序产品
CN116152876A (zh) 表情迁移方法、装置、设备、存储介质及程序产品
CN116912533A (zh) 图像处理方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40055776

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination