CN114757829A - 拍摄校准方法、系统、设备及存储介质 - Google Patents
拍摄校准方法、系统、设备及存储介质 Download PDFInfo
- Publication number
- CN114757829A CN114757829A CN202210439299.5A CN202210439299A CN114757829A CN 114757829 A CN114757829 A CN 114757829A CN 202210439299 A CN202210439299 A CN 202210439299A CN 114757829 A CN114757829 A CN 114757829A
- Authority
- CN
- China
- Prior art keywords
- image
- target object
- object image
- target
- shooting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000004891 communication Methods 0.000 claims description 14
- 239000002131 composite material Substances 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 11
- 230000000007 visual effect Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformation in the plane of the image
- G06T3/40—Scaling the whole image or part thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/617—Upgrading or updating of programs or applications for camera control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Abstract
本申请公开了一种拍摄校准方法、系统、设备及存储介质，所述方法应用于拍摄校准系统，拍摄校准系统包括电子设备和穿戴设备，穿戴设备安装有外置摄像头，包括：通过电子设备拍摄得到第一目标物图像，并将第一目标物图像发送至穿戴设备；通过穿戴设备接收电子设备的第一目标物图像；若通过穿戴设备检测到第一目标物图像与通过外置摄像头拍摄的第二目标物图像不相重合，则对第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将第一目标物图像发送至穿戴设备，直至第一目标物图像与第二目标物图像相重合，得到目标调整参数。本申请解决了电子设备拍摄得到的目标物图像可能与头戴设备中的虚拟背景不匹配，导致用户的体验效果较差的技术问题。
Description
技术领域
本申请涉及图像处理技术领域，尤其涉及一种拍摄校准方法、系统、设备及存储介质。
背景技术
虚拟现实(Virtual Reality，VR)拍摄是将目标物与虚拟场景进行合成的拍摄方法，在进行VR拍摄时，需要一个电子设备和一个头戴设备，电子设备在拍摄目标物图像后，需要将目标物图像去除背景后与头戴设备的虚拟背景进行合成，然而，电子设备拍摄得到的目标物图像可能与头戴设备中的虚拟背景不匹配，例如，目标物图像远大于或小于虚拟背景，导致背景与目标物显得非常出入，进而导致用户的体验效果较差。
发明内容
本申请的主要目的在于提供一种拍摄校准方法、系统、设备及存储介质，旨在解决现有技术中的电子设备拍摄得到的目标物图像可能与头戴设备中的虚拟背景不匹配，导致用户的体验效果较差的技术问题。
为实现上述目的，本申请提供一种拍摄校准方法，所述拍摄校准方法应用于拍摄校准系统，所述拍摄校准系统包括电子设备和穿戴设备，所述穿戴设备安装有外置摄像头，所述电子设备与穿戴设备通信连接，所述拍摄校准方法包括：
通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备；
通过所述穿戴设备接收所述电子设备的第一目标物图像；
若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数。
可选地，所述电子设备中的摄像头和所述穿戴设备中的外置摄像头对应的拍摄视角和拍摄视线相同。
可选地，所述通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备的步骤包括：
通过所述电子设备中的摄像头拍摄预设目标物，得到目标物图像；
去除所述目标物图像的背景，得到所述第一目标物图像；
将所述第一目标物图像传输至所述穿戴设备中。
可选地，在所述通过所述穿戴设备接收所述电子设备发送的第一目标物图像之后，还包括：
将所述第一目标物图像投射显示在所述穿戴设备的镜片屏幕上；
确定所述第二目标物图像与所述第一目标物图像之间的偏移量；
基于所述偏移量，对所述第一目标物图像进行图像偏移补偿，以检测所述第二目标物图像与偏移补偿后的第一目标物图像是否重合。
可选地，所述若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数的步骤包括：
若所述第一目标物图像小于所述第二目标物图像，则通过所述穿戴设备发送图像调大指令至所述电子设备；
通过所述电子设备接收所述图像调大指令，并基于所述图像调大指令，调大所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
可选地，所述若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数的步骤包括：
若所述第一目标物图像大于所述第二目标物图像，则通过所述穿戴设备将图像调小指令发送至所述电子设备；
通过所述电子设备接收所述图像调小指令，并基于所述图像调小指令，调小所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
可选地，在所述若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数的步骤之后，还包括：
基于所述目标调整参数，对所述电子设备中的摄像头进行校准；
通过所述穿戴设备在虚拟空间中所拍摄的环境虚拟图像，并将所述环境虚拟图像发送至校准后的电子设备；
通过所述校准后的电子设备拍摄的目标图像，以及接收所述穿戴设备发送的环境虚拟图像，并将所述环境虚拟图像和所述目标图像进行叠加，得到合成图像。
本申请还提供一种拍摄校准系统，所述拍摄校准系统为虚拟系统，所述拍摄校准系统包括：
接收模块，用于通过所述穿戴设备接收所述电子设备的第一目标物图像；
调整模块，用于若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数。
本申请还提供一种电子设备，所述电子设备为实体设备，所述电子设备包括：存储器、处理器以及存储在所述存储器上的拍摄校准程序，所述拍摄校准程序被所述处理器执行实现如上述的拍摄校准方法的步骤。
本申请还提供一种存储介质，所述存储介质为计算机可读存储介质，所述计算机可读存储介质上存储拍摄校准程序，所述拍摄校准程序被处理器执行实现如上述的拍摄校准方法的步骤。
本申请提供了一种拍摄校准方法、系统、设备及存储介质，所述拍摄校准方法应用于拍摄校准系统，所述拍摄校准系统包括电子设备和穿戴设备，所述穿戴设备安装有外置摄像头，所述电子设备与穿戴设备通信连接，所述拍摄校准方法包括：通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备，进而通过所述穿戴设备接收所述电子设备的第一目标物图像，若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数，实现了将通过安装在穿戴设备的外置摄像头拍摄的第二目标物图像与电子设备拍摄的第一目标物图像进行比较，当不重合时，则图像调整指令，并将所述图像调整指令发送至所述电子设备，以通过所述电子设备基于所述图像调整指令，自动对电子设备的第一目标物图像进行调整，直至通过电子设备拍摄的第一目标物图像能与外置摄像头的第二目标物图像相重合，并记录相重合的目标调整参数，以基于目标调整参数，对电子设备的摄像头进行校准，从而使得校正后的摄像头不管转向哪个角度都与虚拟环境中的物象大小保持一致，从而提高用户的体验效果。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域默认技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请拍摄校准方法第一实施例的流程示意图；
图2为本申请实施例中电子设备与穿戴设备的通信原理图；
图3为本申请实施例中第一目标物图像与第二目标物图像相重合的示意图；
图4为本申请实施例中第一目标物图像小于第二目标物图像大小的示意图；
图5为本申请实施例中第一目标物图像大于第二目标物图像大小的示意图；
图6为本申请拍摄校准方法第二实施例的流程示意图；
图7为本申请实施例方案涉及的硬件运行环境的电子设备结构示意图；
图8为本申请拍摄校准系统的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅用以解释本申请，并不用于限定本申请。
本申请实施例的主要解决方案是：通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备；通过所述穿戴设备接收所述电子设备的第一目标物图像；若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数。从而使得校正后的摄像头不管转向哪个角度都与虚拟环境中的物象大小保持一致，从而提高用户的体验效果。
具体地，参照图1，本申请实施例提供一种拍摄校准方法，在本申请拍摄校准方法的第一实施例中，所述拍摄校准方法包括：
步骤S10，通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备；
在本实施中，需要说明的是，所述穿戴设备包括VR、AR等设备，优选地，所述穿戴设备为头戴式的设备，所述电子设备可以是手机、平板电脑、摄像机等，所述电子设备安装有摄像头，所述穿戴设备的镜片外侧安装有外置摄像头，从而可通过所述外置摄像头拍摄得到外界环境的图像，可参照图2，所述电子设备与所述穿戴设备通过预设通信接口进行通信连接，所述预设通信接口包括但不限于网口、通用串行总线USB接口、串口、VGA(VideoGraphics Array)接口、HDMI(High Definition Multimedia，高清晰度多媒体接口)有线接口以及WiFi、蓝牙无线接口等接口。
进一步需要说明的是，所述电子设备的摄像头和穿戴设备的外置摄像头对应的视线和视角都相同，用户可通过所述穿戴设备的镜片观察到预设目标物的图像，所述第一目标物图像为包括有预设目标物的图像，其中，所述预设目标物包括人物、动物或者现实场景等。
通过所述电子设备中的摄像头拍摄得到预设目标物的目标物图像，进而将所述目标物图像进行前景/后景分离，得到前景图像，并将所述前景图像作为所述第一目标物图像，进而将所述第一目标物图像传输至所述穿戴设备中。
其中，上述步骤S10：通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备的步骤包括：
步骤S11,通过所述电子设备中的摄像头拍摄预设目标物，得到目标物图像；
步骤S12,去除所述目标物图像的背景，得到所述第一目标物图像，并将所述第一目标物图像传输至所述穿戴设备中。
在本实施例中，具体地，首先通过电子设备的摄像头按照预先设置的拍摄视角和拍摄视线拍摄预设目标物，得到目标物图像，进而通过预设前景/背景分离方法去除所述目标物图像的背景，例如，使用光流算法/低秩分解/混合高斯建模等算法对摄像头获取的目标物图像进行前景/背景分离，得到所述第一目标物图像的背景，并将所述第一目标物图像上传至所述穿戴设备中，以将所述第一目标物图像投射显示在所述穿戴设备的镜片上。
步骤S20，通过所述穿戴设备接收所述电子设备发送的第一目标物图像；
其中，在上述步骤S20：通过所述穿戴设备接收所述电子设备发送的第一目标物图像之后，还包括：
步骤A10，将所述第一目标物图像投射显示在所述穿戴设备的镜片屏幕上；
步骤A10，确定所述第二目标物图像与所述第一目标物图像之间的偏移量；
步骤A10，基于所述偏移量，对所述第一目标物图像进行图像偏移补偿，以检测所述第二目标物图像与偏移补偿后的第一目标物图像是否重合。
在本实施例中，需要说明的是，由于穿戴设备的成像原理，投射到穿戴设备的图像与通过穿戴设备的外置摄像头的图像会存在偏移，具体地，通过所述穿戴设备接收所述电子设备发送的第一目标物图像，进而对所述第一目标物图像进行解析，进而基于穿戴设备设计的成像焦距，可计算出第一目标物图像相对于通过所述穿戴设备中外置摄像头的第二目标物图像的偏移量，进而基于所述偏移量，在成像时对所述第一目标物图像进行图像偏移补偿，使得用户在穿戴设备的镜片屏幕上看到的是偏移补偿后的第一目标物图像，从而更加准确判断所述第二目标物图像与偏移补偿后的第一目标物图像是否重合。
步骤S30，若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数。
在本实施例中，需要说明的是，在一种可实施方式中，通过所述穿戴设备的外置摄像头拍摄得到的第二目标物图像和所述电子设备的拍摄得到第一目标物图像的时间相同，具体地，将所述穿戴设备的外置摄像头和所述电子设备中的摄像头朝向所述预设目标物的视线和视角调为一致，进而通过所述电子设备拍摄预设目标物，得到第一目标物图像，以及获得通过所述穿戴设备外置摄像头拍摄预设目标物，得到对应的第二目标物图像。在另一种可实施方式中，通过所述穿戴设备的外置摄像头拍摄得到的第二目标物图像和所述电子设备的拍摄得到第一目标物图像的时间不同，具体地，当电子设备获取到拍摄指令时，通过电子设备拍摄预设目标物得到目标物图像，进而去除所述目标物图像的背景，得到第一目标物图像，并存储第一目标物图像，进而在用户佩戴穿戴设备时，电子设备将存储的第一目标物图像发送至穿戴设备，并且显示在所述穿戴设备的镜片上，进而调整所述穿戴设备的外置摄像头与所述电子设备中的摄像头进行拍摄时的视角和视线相同，得到第二目标物图像。
具体地，将显示在所述穿戴设备的镜片屏幕上的第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像进行匹配，若是，则证明当前电子设备的摄像头所拍摄的第一目标物图像大小与外置摄像头拍摄的第二目标物图像大小相同，参照图3，图3为本申请实施例中第一目标物图像与第二目标物图像相重合的示意图，进而无需对所述电子设备的第一目标物图像进行调整，若否，则证明当前电子设备的摄像头所拍摄的第一目标物图像的大小与外置摄像头拍摄的第二目标物图像大小不一致，此时会存在两种情况，所述第一目标物图像的大小大于所述第二目标物图像大小或者所述第一目标物图像大小小于所述第二目标物图像的大小，从而生成图像调整指令，其中，所述图像调整指令包括图像调大指令以及图像调小指令，从而通过穿戴设备将所述图像调整指令发送至所述电子设备，进而通过所述电子设备基于所述图像调整指令，预设的调节参数策略自动对第一目标物图像的图像尺寸参数按照进行调大或调小图像操作，例如，可预先设置多个不同大小的调节图像尺寸参数进行调节，当第一目标物图像与第二目标物图像的大小相差较大时，按照较大的调节图像尺寸进行调整，并逐渐缩小调节图像尺寸参数，进而返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数，其中，在另一种实施方式中，在重合匹配过程中，若检测所述第一目标物图像的大小与所述第二目标物图像的大小之间的距离在预设距离阈值内，则证明所述第一目标物图像与所述第二目标物图像匹配成功，其中，所述预设距离阈值可根据实际情况进行设置，例如，将所述预设距离阈值设置为1毫米，在此不做具体限制，另外地，在得到目标调整参数后，可基于所述目标调整参数，对电子设备中的摄像头进行校准，进而使得校正后的摄像头不管转向哪个角度都与虚拟环境中的物象大小保持一致，从而提高用户的体验效果。
其中，上述步骤S30，可以包括：
步骤a1，若所述第一目标物图像小于所述第二目标物图像，则生成所述图像调大指令，并通过所述穿戴设备将所述图像调大指令发送至所述电子设备；
步骤a2，通过所述电子设备接收所述图像调大指令，并基于所述图像调大指令，调大所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
步骤a3，返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
在本实施例中，参照图4，图4为本申请实施例中第一目标物图像小于第二目标物图像大小的示意图，其中，外边矩形表示穿戴设备的镜片，线条较粗的图像表示所述第二目标物图像，线条较小的图像表示所述第一目标物图像，具体地，若所述第一目标物图像的大小小于所述第二目标物图像的大小，则证明当前电子设备的拍摄得到的第一目标物图像的图像尺寸参数过小，需要调大第一目标物图像的图像尺寸参数，因此生成图像调大指令，进而将所述图像调大指令发送至所述电子设备，进而通过所述电子设备基于所述图像调大指令，调大所述第一目标物图像的图像尺寸参数，从而将所述参数调整后的第一目标物图像发送至所述穿戴设备，进而将所述第一目标物图像与所述第二目标物图像再次进行对比，直至所述第一目标物图像与所述第二目标物图像相重合，进而将图像相重合对应的图像尺寸参数作为所述目标调整参数。
其中，上述步骤S30，可以包括：
步骤b1，若所述第一目标物图像大于所述第二目标物图像，则生成所述图像调小指令，通过所述穿戴设备将所述图像调小指令发送至所述电子设备；
步骤b2，通过所述电子设备接收所述图像调小指令，并基于所述图像调小指令，调小所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
步骤b3，返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
在本实施例中，参照图5，图5为本申请实施例中第一目标物图像大于第二目标物图像大小的示意图，其中，外边矩形表示穿戴设备的镜片，线条较粗的图像表示所述第二目标物图像，线条较小的图像表示所述第一目标物图像，具体地，若所述第一目标物图像的大小大于所述第二目标物图像的大小，则证明当前电子设备的拍摄得到的第一目标物图像的图像尺寸参数过大，需要调小第一目标物图像的图像尺寸参数，因此生成图像调小指令，进而将所述图像调小指令发送至所述电子设备，进而通过所述电子设备基于所述图像调小指令，调大所述第一目标物图像的图像尺寸参数，从而将所述参数调整后的第一目标物图像发送至所述穿戴设备，进而将所述第一目标物图像与所述第二目标物图像再次进行对比，直至所述第一目标物图像与所述第二目标物图像相重合，进而将图像相重合对应的图像尺寸参数作为所述目标调整参数。
本申请实施例通过上述方案，实现了将通过安装在穿戴设备的外置摄像头拍摄的第二目标物图像与电子设备拍摄的第一目标物图像进行比较，当不重合时，则图像调整指令，并将所述图像调整指令发送至所述电子设备，以通过所述电子设备基于所述图像调整指令，自动对电子设备的第一目标物图像进行调整，直至通过电子设备拍摄的第一目标物图像能与外置摄像头的第二目标物图像相重合，并记录相重合的目标调整参数，以基于目标调整参数，对电子设备的摄像头进行校准，从而使得校正后的摄像头不管转向哪个角度都与虚拟环境中的物象大小保持一致，从而提高用户的体验效果。
进一步地，参照图6，基于本申请中第一实施例，在本申请的另一实施例中，在上述步骤S30之后，还包括：
步骤B10，基于所述目标调整参数，对所述电子设备中的摄像头进行校准；
步骤B20，通过所述穿戴设备在虚拟空间中所拍摄的环境虚拟图像，并将所述环境虚拟图像发送至校准后的电子设备；
步骤B30，通过所述校准后的电子设备拍摄得到目标图像，以及接收所述穿戴设备发送的环境虚拟图像，并将所述环境虚拟图像和所述目标图像进行叠加，得到合成图像。
在本实施例中，具体地，基于所述目标调整参数，对所述电子设备中的摄像头进行校准，进而通过所述穿戴设备在虚拟空间中所拍摄的环境虚拟图像，以及通过所述校正后的电子设备拍摄得到目标图像，穿戴设备会将所述环境虚拟图像传输至所述电子设备，进而电子设备会去除目标图像的背景，将去除背景后的目标图像作为前景，将穿戴设备所拍摄的环境虚拟图像作为背景，将前景和背景进行叠加，输出所述合成图像，由于是利用校正后的电子设备进行拍摄，其所拍摄出来的目标物与穿戴设备的虚拟环境相匹配，进一步地，当用户佩戴穿戴设备时，电子设备将存储的合成图像发送至穿戴设备，用户可通过穿戴设备的屏幕上看到合成图像，从而只需要电子设备和穿戴设备即可完成VR拍摄，方便快捷，提高用户体验。
本申请实施例通过上述方案，实现了利用校正后的电子设备进行拍摄，所拍摄出来的目标图像与穿戴设备的虚拟环境相匹配，从而得到的合成图像更加贴合实际情况，提高用户体验。参照图6，图6是本申请实施例方案涉及的硬件运行环境的电子设备结构示意图。
如图7所示，该电子设备可以包括：处理器1001，例如CPU，存储器1005，通信总线1002。其中，通信总线1002用于实现处理器1001和存储器1005之间的连接通信。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储设备。
可选地，该电子设备还可以包括矩形用户接口、网络接口、相机、RF(RadioFrequency，射频)电路，传感器、音频电路、WiFi模块等等。矩形用户接口可以包括显示屏(Display)、输入子模块比如键盘(Keyboard)，可选矩形用户接口还可以包括标准的有线接口、无线接口。网络接口可选的可包括标准的有线接口、无线接口(如WIFI接口)。
本领域技术人员可以理解，图7中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图7所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块以及拍摄校准程序。操作系统是管理和控制电子设备硬件和软件资源的程序，支持拍摄校准程序以及其它软件和/或程序的运行。网络通信模块用于实现存储器1005内部各组件之间的通信，以及与拍摄校准系统中其它硬件和软件之间通信。
在图7所示的电子设备中，处理器1001用于执行存储器1005中存储的拍摄校准程序，实现上述任一项所述的拍摄校准方法的步骤。
本申请电子设备具体实施方式与上述拍摄校准方法各实施例基本相同，在此不再赘述。
此外，请参照图8，图8是本申请拍摄校准系统的功能模块示意图，本申请还提供一种拍摄校准系统，所述拍摄校准系统包括：
发送模块，用于通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备；
接收模块，用于通过所述穿戴设备接收所述电子设备的第一目标物图像；
调整模块，用于若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数。
可选地，所述发送模块还用于：
通过所述电子设备中的摄像头拍摄预设目标物，得到目标物图像；
去除所述目标物图像的背景，得到所述第一目标物图像，并将所述第一目标物图像传输至所述穿戴设备中。
可选地，所述拍摄校准系统还用于：
将所述第一目标物图像投射显示在所述穿戴设备的镜片屏幕上；
确定所述第二目标物图像与所述第一目标物图像之间的偏移量；
基于所述偏移量，对所述第一目标物图像进行图像偏移补偿，以判断所述第二目标物图像与偏移补偿后的第一目标物图像是否重合。
可选地，所述校正模块还用于：
若所述第一目标物图像小于所述第二目标物图像，则生成所述图像调大指令，并通过所述穿戴设备将所述图像调大指令发送至所述电子设备；
通过所述电子设备接收所述图像调大指令，并基于所述图像调大指令，调大所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
可选地，所述校正模块还用于：
若所述第一目标物图像大于所述第二目标物图像，则生成所述图像调小指令，通过所述穿戴设备将所述图像调小指令发送至所述电子设备；
通过所述电子设备接收所述图像调小指令，并基于所述图像调小指令，调小所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
可选地，所述拍摄校准系统还用于：
基于所述目标调整参数，对所述电子设备中的摄像头进行校准；
通过所述穿戴设备在虚拟空间中所拍摄的环境虚拟图像，并将所述环境虚拟图像发送至校准后的电子设备；
通过所述校准后的电子设备拍摄得到目标图像，以及接收所述穿戴设备发送的环境虚拟图像，并将所述环境虚拟图像和所述目标图像进行叠加，得到合成图像。
本申请拍摄校准系统的具体实施方式与上述拍摄校准方法各实施例基本相同，在此不再赘述。
本申请实施例提供了一种存储介质，所述存储介质为计算机可读存储介质，且所述计算机可读存储介质存储有一个或者一个以上程序，所述一个或者一个以上程序还可被一个或者一个以上的处理器执行以用于实现上述任一项所述的拍摄校准方法的步骤。
本申请计算机可读存储介质具体实施方式与上述拍摄校准方法各实施例基本相同，在此不再赘述。
以上仅为本申请的优选实施例，并非因此限制本申请的专利范围，凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本申请的专利处理范围内。
Claims (10)
1.一种拍摄校准方法，其特征在于，所述拍摄校准方法应用于拍摄校准系统，所述拍摄校准系统包括电子设备和穿戴设备，所述穿戴设备安装有外置摄像头，所述电子设备与穿戴设备通信连接，所述拍摄校准方法包括：
通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备；
通过所述穿戴设备接收所述电子设备的第一目标物图像；
若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数。
2.如权利要求1所述的拍摄校准方法，其特征在于，所述电子设备中的摄像头和所述穿戴设备中的外置摄像头对应的拍摄视角和拍摄视线相同。
3.如权利要求1所述的拍摄校准方法，其特征在于，所述通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备的步骤包括：
通过所述电子设备中的摄像头拍摄预设目标物，得到目标物图像；
去除所述目标物图像的背景，得到所述第一目标物图像，并将所述第一目标物图像传输至所述穿戴设备中。
4.如权利要求1所述的拍摄校准方法，其特征在于，在所述通过所述穿戴设备接收所述电子设备发送的第一目标物图像之后，还包括：
将所述第一目标物图像投射显示在所述穿戴设备的镜片屏幕上；
确定所述第二目标物图像与所述第一目标物图像之间的偏移量；
基于所述偏移量，对所述第一目标物图像进行图像偏移补偿，以检测所述第二目标物图像与偏移补偿后的第一目标物图像是否重合。
5.如权利要求1所述的拍摄校准方法，其特征在于，所述图像调整指令包括图像调大指令，
所述若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数的步骤包括：
若所述第一目标物图像小于所述第二目标物图像，则生成所述图像调大指令，并通过所述穿戴设备将所述图像调大指令发送至所述电子设备；
通过所述电子设备接收所述图像调大指令，并基于所述图像调大指令，调大所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
6.如权利要求1所述的拍摄校准方法，其特征在于，所述图像调整指令包括图像调小指令，
所述若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数的步骤包括：
若所述第一目标物图像大于所述第二目标物图像，则生成所述图像调小指令，通过所述穿戴设备将所述图像调小指令发送至所述电子设备；
通过所述电子设备接收所述图像调小指令，并基于所述图像调小指令，调小所述第一目标物图像的图像尺寸参数，得到参数调整后的第一目标物图像；
返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，并将图像相重合对应的图像尺寸参数作为所述目标调整参数。
7.如权利要求1所述的拍摄校准方法，其特征在于，在所述若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数的步骤之后，还包括：
基于所述目标调整参数，对所述电子设备中的摄像头进行校准；
通过所述穿戴设备在虚拟空间中所拍摄的环境虚拟图像，并将所述环境虚拟图像发送至校准后的电子设备；
通过所述校准后的电子设备拍摄的目标图像，以及接收所述穿戴设备发送的环境虚拟图像，并将所述环境虚拟图像和所述目标图像进行叠加，得到合成图像。
8.一种拍摄校准系统，其特征在于，所述拍摄校准系统包括：
发送模块，用于通过所述电子设备拍摄得到第一目标物图像，并将所述第一目标物图像发送至所述穿戴设备；
接收模块，用于通过所述穿戴设备接收所述电子设备的第一目标物图像；
调整模块，用于若通过所述穿戴设备检测到所述第一目标物图像与通过所述外置摄像头拍摄得到的第二目标物图像不相重合，则生成图像调整指令，并将所述图像调整指令发送至所述电子设备，以供所述电子设备基于所述图像调整指令，对所述第一目标物图像的图像尺寸参数进行调整，并返回执行步骤：将所述第一目标物图像发送至所述穿戴设备，直至所述第一目标物图像与所述第二目标物图像相重合，得到目标调整参数。
9.一种电子设备，其特征在于，所述电子设备包括：摄像头、存储器、处理器以及存储在存储器上的拍摄校准程序，
所述拍摄校准程序被所述处理器执行实现如权利要求1至7中任一项所述拍摄校准方法的步骤。
10.一种存储介质，所述存储介质为计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有拍摄校准程序，所述拍摄校准程序被处理器执行实现如权利要求1至7中任一项所述拍摄校准方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210439299.5A CN114757829A (zh) | 2022-04-25 | 2022-04-25 | 拍摄校准方法、系统、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210439299.5A CN114757829A (zh) | 2022-04-25 | 2022-04-25 | 拍摄校准方法、系统、设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114757829A true CN114757829A (zh) | 2022-07-15 |
Family
ID=82332955
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210439299.5A Pending CN114757829A (zh) | 2022-04-25 | 2022-04-25 | 拍摄校准方法、系统、设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114757829A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016115874A1 (zh) * | 2015-01-21 | 2016-07-28 | 成都理想境界科技有限公司 | 能自动调节景深的双目ar头戴设备及景深调节方法 |
| CN107209960A (zh) * | 2014-12-18 | 2017-09-26 | 脸谱公司 | 用于提供虚拟现实环境的用户界面的系统、设备及方法 |
| CN109636916A (zh) * | 2018-07-17 | 2019-04-16 | 北京理工大学 | 一种动态标定的大范围虚拟现实漫游系统及方法 |
| CN110782499A (zh) * | 2019-10-23 | 2020-02-11 | Oppo广东移动通信有限公司 | 一种增强现实设备的标定方法、标定装置及终端设备 |
| WO2021189650A1 (zh) * | 2020-03-27 | 2021-09-30 | 深圳光启超材料技术有限公司 | 实时视频流的显示方法、头戴设备、存储介质及电子设备 |
| CN113518189A (zh) * | 2020-04-09 | 2021-10-19 | 华为技术有限公司 | 拍摄方法、系统、电子设备及存储介质 |
| CN113793389A (zh) * | 2021-08-24 | 2021-12-14 | 国网甘肃省电力公司 | 一种增强现实系统虚实融合标定方法及装置 |
-
2022
- 2022-04-25 CN CN202210439299.5A patent/CN114757829A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107209960A (zh) * | 2014-12-18 | 2017-09-26 | 脸谱公司 | 用于提供虚拟现实环境的用户界面的系统、设备及方法 |
| WO2016115874A1 (zh) * | 2015-01-21 | 2016-07-28 | 成都理想境界科技有限公司 | 能自动调节景深的双目ar头戴设备及景深调节方法 |
| CN109636916A (zh) * | 2018-07-17 | 2019-04-16 | 北京理工大学 | 一种动态标定的大范围虚拟现实漫游系统及方法 |
| CN110782499A (zh) * | 2019-10-23 | 2020-02-11 | Oppo广东移动通信有限公司 | 一种增强现实设备的标定方法、标定装置及终端设备 |
| WO2021189650A1 (zh) * | 2020-03-27 | 2021-09-30 | 深圳光启超材料技术有限公司 | 实时视频流的显示方法、头戴设备、存储介质及电子设备 |
| CN113518189A (zh) * | 2020-04-09 | 2021-10-19 | 华为技术有限公司 | 拍摄方法、系统、电子设备及存储介质 |
| CN113793389A (zh) * | 2021-08-24 | 2021-12-14 | 国网甘肃省电力公司 | 一种增强现实系统虚实融合标定方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102502404B1 (ko) | 정보 처리 장치 및 방법, 그리고 프로그램 | |
| US10638035B2 (en) | Image processing devices, image processing method, and non-transitory computer-readable medium | |
| EP3435655B1 (en) | Electronic device for acquiring image using plurality of cameras and method for processing image using the same | |
| US10306165B2 (en) | Image generating method and dual-lens device | |
| CN108762501B (zh) | Ar显示方法、智能终端、ar设备及系统 | |
| US20170213085A1 (en) | See-through smart glasses and see-through method thereof | |
| JP2008048377A (ja) | 遠隔指示システム及び遠隔指示システム用のプログラム | |
| CN111062881A (zh) | 图像处理方法及装置、存储介质、电子设备 | |
| CN107948505B (zh) | 一种全景拍摄方法及移动终端 | |
| US10250802B2 (en) | Apparatus and method for processing wide viewing angle image | |
| CN109040524B (zh) | 伪影消除方法、装置、存储介质及终端 | |
| CN108632543B (zh) | 图像显示方法、装置、存储介质及电子设备 | |
| CN109981983B (zh) | 增强现实图像处理方法、装置、电子设备和存储介质 | |
| CN111565309A (zh) | 显示设备及其畸变参数确定方法、装置、系统及存储介质 | |
| CN114900624A (zh) | 拍摄校准方法、系统、设备及存储介质 | |
| CN113487500B (zh) | 图像畸变校正方法与装置、电子设备和存储介质 | |
| KR20130081439A (ko) | 휴대 단말기에서 카메라 뷰 영역을 표시하는 장치 및 방법 | |
| US8619151B2 (en) | Photographing method and apparatus providing correction of object shadows, and a recording medium storing a program for executing the method | |
| CN105210362B (zh) | 图像调整设备、图像调整方法和图像捕获设备 | |
| CN114757829A (zh) | 拍摄校准方法、系统、设备及存储介质 | |
| US10701286B2 (en) | Image processing device, image processing system, and non-transitory storage medium | |
| CN108476290B (zh) | 用于提供全景图像的电子装置及其控制方法 | |
| CN112116530B (zh) | 鱼眼图像畸变矫正方法、装置和虚拟显示系统 | |
| CN111263115B (zh) | 用于呈现图像的方法、装置、电子设备和计算机可读介质 | |
| CN114785909A (zh) | 拍摄校准方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |