CN111885306B - 目标对象调整方法、计算机装置及存储介质 - Google Patents

目标对象调整方法、计算机装置及存储介质 Download PDF

Info

Publication number
CN111885306B
CN111885306B CN202010740620.4A CN202010740620A CN111885306B CN 111885306 B CN111885306 B CN 111885306B CN 202010740620 A CN202010740620 A CN 202010740620A CN 111885306 B CN111885306 B CN 111885306B
Authority
CN
China
Prior art keywords
target object
coordinate
image
matting
patch model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010740620.4A
Other languages
English (en)
Other versions
CN111885306A (zh
Inventor
李锐
陶澍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Ivreal Technology Co ltd
Original Assignee
Chongqing Ivreal Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Ivreal Technology Co ltd filed Critical Chongqing Ivreal Technology Co ltd
Priority to CN202010740620.4A priority Critical patent/CN111885306B/zh
Publication of CN111885306A publication Critical patent/CN111885306A/zh
Application granted granted Critical
Publication of CN111885306B publication Critical patent/CN111885306B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供了一种目标对象调整方法,包括:利用拍摄设备实时拍摄目标对象的影像,并从所述拍摄的影像中,确定所述目标对象所对应的每个目标像素点的RGB数据;对所拍摄的影像作抠像处理获得抠像图像;基于所述目标对象所对应的每个目标像素点的RGB数据以及所述抠像图像创建一个面片模型;基于所述面片模型以及所述目标对象的实际高度计算一个缩放比例ScaleY;根据所述缩放比例ScaleY调整所述面片模型;及基于调整后的所述面片模型调整所述目标对象的位置。本发明还提供一种计算机装置及存储介质。利用本发明可避免因为目标对象的移动而导致目标对象的位置在虚拟环节中脱节等问题。

Description

目标对象调整方法、计算机装置及存储介质
技术领域
本发明涉及计算机处理技术领域,具体涉及一种目标对象调整方法、计算机装置及存储介质。
背景技术
本部分旨在为权利要求书及具体实施方式中陈述的本发明实施例的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
目前在远程直播授课过程中,如果发现老师端的抠像效果、位置信息不正确,需要技术人员关闭老师直播进程以进行调整。在调整好后重新开始直播。这样大幅度的降低了学生的体验,同时也影响老师的授课。
此外,在正常的授课情况下,老师在相机拍摄的画面中是会移动的。由此还会导致老师的位置在虚拟环节中脱节,比如脚步悬空等问题。
发明内容
鉴于以上内容,有必要提出一种目标对象调整方法、计算机装置及存储介质,能够解决现有技术中所存在的上述技术问题。
本发明第一方面提供一种目标对象调整方法,包括:利用拍摄设备实时拍摄目标对象的影像,并从所述拍摄的影像中,确定所述目标对象所对应的每个目标像素点的RGB数据;对所拍摄的影像作抠像处理获得抠像图像;基于所述目标对象所对应的每个目标像素点的RGB数据以及所述抠像图像创建一个面片模型;基于所述面片模型以及所述目标对象的实际高度计算一个缩放比例ScaleY;根据所述缩放比例ScaleY调整所述面片模型;及基于调整后的所述面片模型调整所述目标对象的位置。
优选地,所述面片模型的宽高比例与所述抠像图像的宽高比例一致。
优选地,所述基于所述面片模型以及所述目标对象的实际高度计算一个缩放比例ScaleY包括:确定所述目标对象在所述抠像图像中所对应的最大Y坐标Ymax,以及最小Y坐标Ymin;及根据所述目标对象的实际高度、所述抠像图像的高度height、所述最大Y坐标Ymax,以及最小Y坐标Ymin计算获得所述缩放比例ScaleY。
优选地,该方法还包括:通过将所述抠像图像中每个像素的Alpha通道的数值与预设值的比较,确定所述目标对象在所述抠像图像中所对应的最大Y坐标Ymax、最小Y坐标Ymin、最大X坐标Xmax,以及最小X坐标Xmin。
优选地,所述基于调整后的所述面片模型调整所述目标对象的位置包括:从调整后的所述面片模型中设定所述目标对象的起始站点;从调整后的所述面片模型中为所述目标对象设定目标站点;计算所述目标对象从所述起始站点移动到所述目标站点的插值TransformI;及根据所述插值TransformI移动调整后的所述面片模型。
优选地,所述目标对象的起始站点为第一坐标点与第二坐标点之间的连线的中点,其中,所述第一坐标点所对应的X坐标为所述最小X坐标Xmin,该第一坐标点所对应的Y坐标为所述最大Y坐标Ymax;所述第二坐标点所对应的X坐标为所述最大X坐标Xmax,该第二坐标点所对应的Y坐标为所述最大Y坐标Ymax;所述目标站点为调整后的所述面片模型的下边缘的中点。
优选地,该方法中,根据所获取的抠图参数对所述实景图像作抠像处理获得所述抠像图像。
优选地,该方法还包括:按照预设的频率从服务器获取所述抠图参数;将所获取的抠图参数与本地存储的抠图参数进行比较;及若所获取的抠图参数与本地存储的抠图参数不一致,调整所述频率,并更新本地存储的抠图参数为当前从所述服务器所获取的抠图参数。
本发明第二方面提供一种计算机装置,包括存储器和处理器,所述存储器用于存储至少一个指令,所述处理器用于执行所述目标对象调整方法。
本发明第三方面一种计算机可读存储介质,存储有至少一个指令,所述至少一个指令被处理器执行所述目标对象调整方法。
本发明实施例中所述的目标对象调整方法、计算机装置及存储介质,通过将一个抠像好的图像把目标对象调整设置到合理大小,然后放到场景理想的位置。由此在实际应用场景中不会因为目标对象在拍摄画面中移动而导致目标对象的位置在虚拟环节中脱节如脚步悬空等问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1是本发明较佳实施例提供的目标对象调整系统的运行环境图。
图2是本发明较佳实施例提供的目标对象调整系统的功能模块图。
图3是本发明较佳实施例提供的目标对象调整方法的流程图。
图4举例说明抠像图像。
图5举例说明目标对象在所述抠像图像中所对应的矩形边框。
图6举例说明面片模型。
图7举例说明调整面片模型中的目标对象的大小。
图8举例说明调整面片模型中的目标对象的位置。
如下具体实施方式将结合上述附图进一步说明本发明。
主要元件符号说明
Figure BDA0002606609730000031
Figure BDA0002606609730000041
如下具体实施方式将结合上述附图进一步说明本发明实施例。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施例对本发明进行详细描述。需要说明的是,在不冲突的情况下,本发明的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。
参阅图1所示,是本发明较佳实施例提供的目标对象调整系统的运行环境图。
本实施例中,目标对象调整系统30运行于计算机装置100中。本实施例中,计算机装置100包括,但不限于,存储器31、处理器32、拍摄设备33。
本实施例中,计算机装置100可以通过有线或者无线通讯方式与服务器200通讯连接。所述服务器200可以为云服务器。所述计算机装置100可以为个人电脑、服务器等设备。所述目标对象调整系统30可以对视频/图像中的目标对象的位置和大小进行调整,并将调整后的视频/图像直接发送到客户端(图中未示出),或者通过所述服务器200发送到客户端。在一个实施例中,所述服务器200存储了各种数据,例如存储了抠图参数如颜色、亮度等相关数据。
在一个实施例中,所述拍摄设备33可以内置于所述计算机装置100内,或者外接于该计算机装置100,例如,所述拍摄设备33可以是网络摄像头,与所述计算机装置100有线或者无线通讯连接。
本领域技术人员应该了解,图1示出的计算机装置的结构并不构成本发明实施例的限定,所述计算机装置100还可以包括比图示更多或更少的其他硬件或者软件,或者不同的部件布置。例如,所述计算机装置100还可以包括显示屏。
在一些实施例中,所述计算机装置100包括一种能够按照事先设定或存储的计算机可读指令,自动进行数值计算和/或信息处理的终端,其硬件包括但不限于微处理器、专用集成电路、可编程门阵列、数字处理器及嵌入式设备等。
需要说明的是,所述计算机装置100仅为举例,其他现有的或今后可能出现的计算机装置如可适应于本发明,也应包含在本发明的保护范围以内,并以引用方式包含于此。
在一些实施例中,所述存储器31用于存储程序代码和各种数据,例如安装在所述计算机装置100中的目标对象调整系统30,并在计算机装置100的运行过程中实现高速、自动地完成程序或数据的存取。所述存储器31包括只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、一次可编程只读存储器(One-timeProgrammable Read-Only Memory,OTPROM)、电子擦除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者任何其他能够用于携带或存储数据的非易失性的可读存储介质。
在一些实施例中,所述至少一个处理器32可以由集成电路组成,例如可以由单个封装的集成电路所组成,也可以是由多个相同功能或不同功能封装的集成电路所组成,包括一个或者多个中央处理器(Central Processing unit,CPU)、微处理器、数字处理芯片、图形处理器及各种控制芯片的组合等。所述至少一个处理器32是所述计算机装置100的控制核心(Control Unit),利用各种接口和线路连接整个计算机装置100的各个部件,通过运行或执行存储在所述存储器31内的程序或者模块,以及调用存储在所述存储器31内的数据,以执行计算机装置100的各种功能和处理数据,例如对视频/图像中的目标对象的位置和大小进行调整功能(详见下文中对图3的描述)。
尽管未示出,所述计算机装置100还可以包括给各个部件供电的电源(比如电池),优选地,电源可以通过电源管理装置与所述至少一个处理器32逻辑相连,从而通过电源管理装置实现管理充电、放电、以及功耗管理等功能。电源还可以包括一个或一个以上的直流或交流电源、再充电装置、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。所述计算机装置100还可以包括电热元件、多种传感器、蓝牙模块、Wi-Fi模块等,在此不再赘述。
应该了解,所述实施例仅为说明之用,在专利申请范围上并不受此结构的限制。
在一些实施例中,所述目标对象调整系统30可以包括多个由程序代码段所组成的功能模块。所述目标对象调整系统30中的各个程序段的程序代码可以存储于存储器(例如计算机装置100的存储器31)中,并由至少一个处理器(例如处理器32)所执行,以实现对视频/图像中的目标对象的位置和大小进行调整功能(详见下文中对图3的描述)。
参见图2所示,本实施例中,所述目标对象调整系统30根据其所执行的功能,可以被划分为多个功能模块。所述功能模块可以包括:获取模块301、执行模块302。本发明所称的模块是指一种能够被至少一个处理器(例如处理器32)所执行并且能够完成固定功能的一系列计算机可读指令段,其存储在存储器(例如计算机装置100的存储器31)中。在本实施例中,关于各模块的功能将在后续的实施例中详述。
本实施例中,以软件功能模块的形式实现的集成的单元,可以存储在一个非易失性可读取存储介质中。上述软件功能模块包括至少一个计算机可读指令,使得一台计算机装置或处理器(processor)通过执行该至少一个计算机可读指令实现本发明各个实施例的方法的部分,例如图3所示的对视频/图像中的目标对象的位置和大小进行调整的方法。
在进一步的实施例中,结合图1,所述至少一个处理器32可执行所述计算机装置100的操作系统以及安装的各类应用程序(如所述的目标对象调整系统30)、程序代码等。
在进一步的实施例中,所述存储器31中存储有程序代码,且所述至少一个处理器32可调用所述存储器31中存储的程序代码以执行相关的功能。例如,图1中所述目标对象调整系统30的各个模块是存储在所述存储器31中的程序代码,并由所述至少一个处理器32所执行,从而实现所述各个模块的功能以达到对视频/图像中的目标对象的位置和大小进行调整的目的(详见下文中对图3的描述)。
在本发明的一个实施例中,所述存储器31存储一个或多个计算机可读指令,所述一个或多个计算机可读指令被所述至少一个处理器32所执行以实现对视频/图像中的目标对象的位置和大小进行调整的目的。具体地,所述至少一个处理器32对上述计算机可读指令的具体实现方法详见下文中对图3的描述。
参阅图3所示,为本发明较佳实施例提供的目标对象调整方法的流程图。
在本实施例中,所述目标对象调整方法可以应用于计算机装置100中,对于需要目标对象调整计算机装置100,可以直接在计算机装置100上集成本发明的方法所提供的用于目标对象调整功能,或者以软件开发工具包(Software Development Kit,SDK)的形式运行在计算机装置100上。
如图3所示,所述目标对象调整方法具体包括以下步骤,根据不同的需求,该流程图中步骤的顺序可以改变,某些步骤可以省略。
步骤S1、获取模块301利用拍摄设备33实时拍摄目标对象的影像,并从所述拍摄的影像中,确定所述目标对象所对应的每个像素点的RGB数据(为便于清楚简单说明本发明,这里将所述目标对象所对应的像素点称为“目标像素点”)。所述获取模块301还对所拍摄的影像作抠像处理获得抠像图像。
本实施例以老师远程授课为例,获取模块301可以利用拍摄设备33实时拍摄老师授课的场景获得实景影像。在这里,老师也即是所述目标对象。
本实实施例中,所述抠像处理也即是根据影像中的抠像参数创建透明度区域。在一个实施例中,所述抠图参数包括,但不限于,颜色、亮度。即所述获取模块301可以根据所述抠图参数对拍摄的影像作抠像处理来获取所述抠像图像。
本实施中,所述抠像图像为黑白图像。举例而言,参阅图4所示,获得包括目标对象2的抠像图像3。
在一个实施例中,获取模块301可以按照预设的频率从服务器200获取所述抠图参数。
在一个实施例中,获取模块301将从服务器200所获取的抠图参数与本地存储的抠图参数进行比较。若从服务器200所获取的抠图参数与本地存储的抠图参数不一致,获取模块301调整所述频率,并更新本地存储的抠图参数为当前从所述服务器200所获取的抠图参数。
在一个实施例中,当从所述服务器200所获取的抠图参数与本地存储的抠图参数不一致时,获取模块301调高所述频率。例如,调整频率后,获取模块301每间隔1分钟获取一次所述抠图参数。
在其他实施例中,所述获取模块301也可以响应用户的输入来设置所述抠图参数,并根据所设置的所述抠图参数来对所述实景影像作抠图处理。
步骤S2、执行模块302基于所述目标对象所对应的每个目标像素点的RGB数据以及所述抠像图像创建一个面片模型。
本实施例中,所述基于所述目标对象所对应的每个目标像素点的RGB数据以及所述抠像图像创建一个面片模型包括:
根据所述抠像图像的宽高比例创建一个矩形模型;
在所述矩形模型中映射所述抠像图像中的所述目标对象以及所述目标对象所对应的每个目标像素点的RGB数据,将作了所述映射的矩形模型作为所述面片模型。由此,在所述矩形模型中所述目标对象所对应的像素点具有了颜色通道值以及阿尔法通道值。
在一个实施例中,所述面片模型的宽高比例与所述抠像图像的宽高比例一致。本实施例中,所述矩形模型可以是指矩形图形。
本实施例中,所述执行模块302首先为所述矩形模型设置一个高度(为矩形模型设置高度也即是为所述面片模型设置高度);根据所述矩形模型的高度以及所述抠像图像的宽高比例计算所述矩形模型的宽度;然后基于所计算获得的宽度以及所设置的高度来创建所述矩形模型。
举例而言,参阅图5所示,以所述执行模块302设定了所述面片模型4的高度CD为1米为例,那么该面片模型4的宽度C’C即为1米*(1920/1080)=1.7778米。
本实施例中,执行模块302还可以通过将所述抠像图像中每个像素的Alpha通道的数值与预设值(例如0.95)的比较,确定出所述目标对象在所述抠像图像中所对应的四个目标坐标点P1、P2、P3、P4,并基于该四个目标坐标点确定出所述目标对象在所述抠像图像中所对应的矩形边框。
具体地,该四个目标坐标点由所述目标对象在所述抠像图像中所对应的最大X坐标Xmax、最小X坐标Xmin、最大Y坐标Ymax,以及最小Y坐标Ymin所构成,也即是P1(Xmin,Ymin),P2(Xmax,Ymin),P3(Xmin,Ymax),P4(Xmax,Ymax)。
需要说明的是,由于一个像素的Alpha通道的数值为0时则表示所述像素是完全透明的;若一个像素的Alpha通道的数值为1,则表示所述像素是完全不透明的;若一个像素的Alpha通道的数值在0到1之间,则表示所述像素是半透明的。因此,本实施例中,执行模块302可以通过将所述抠像图像中每个像素的Alpha通道的数值与预设值的比较来确定出所述目标对象在所述抠像图像中所对应的所有坐标点,然后从所述目标对象在所述抠像图像中所对应的所有坐标点中确定出所述四个目标坐标点。
例如,参阅图5所示,以所述抠像图像3的像素宽度Width=1920,像素高Height=1080为例,即所述抠像图像的像素点总数为1920*1080。执行模块302通过将所述抠像图像3中每个像素的Alpha通道的数值与预设值(例如0.95)的比较确定出所述目标对象2在所述抠像图像3中所对应的所述四个目标坐标点P1、P2、P3、P4。例如确定出所述目标对象2在所述抠像图像3中所对应的最大X坐标Xmax=1058、最小X坐标Xmin=863、最大Y坐标Ymax=915,以及最小Y坐标Ymin=162。执行模块302还可以基于该四个目标坐标点P1、P2、P3、P4确定出所述目标对象2在所述抠像图像3中所对应的矩形边框20。需要说明的是,由于所述面片模型4的宽高比例与所述抠像图像的宽高比例一致,因此,所述执行模块302一旦确定了所述目标对象2在所述抠像图像3中所对应的四个目标坐标点P1、P2、P3、P4的坐标,也就可以确定所述面片模型4中所述目标对象2所对应的矩形边框20的四个位置点A’、A、B’、B的坐标。也即是位置点A’的坐标同于目标坐标点P1;位置点A的坐标同于目标坐标点P2;位置点B’的坐标同于目标坐标点P3;位置点B的坐标同于目标坐标点P4。
步骤S3、执行模块302基于所述面片模型以及所述目标对象的实际高度计算一个缩放比例ScaleY。
需要说明的是,所述缩放比例ScaleY也即是要把面片模型的中目标对象的高度调整到该目标对象的实际高度时,对该面片模型所要执行的缩放比例。
换句话来讲,所述缩放比例ScaleY也即是要将图5所示的面片模型4中的目标对象2的高度AB调整到该目标对象2的实际高度例如1.7米时,对该面片模型4所要执行的一个缩放比例。
参阅图7所示,假设执行模块302根据该缩放比例ScaleY对面片模型4执行了缩放后,需要获得面片模型5。在该面片模型5中,该目标对象2的高度为该目标对象2的实际高度即EF=1.7米。
本实施例中,所述基于所述面片模型以及所述目标对象的实际高度计算一个缩放比例ScaleY包括(a1)-(a2):
(a1)确定所述目标对象在所述抠像图像中所对应的最大Y坐标Ymax,以及最小Y坐标Ymin。
如前面所述,执行模块302可以通过将所述抠像图像中每个像素的Alpha通道的数值与预设值的比较,确定出所述目标对象在所述抠像图像中所对应的所述四个目标坐标点。由此可以确定出所述目标对象在所述抠像图像中所对应的最大Y坐标Ymax,以及最小Y坐标Ymin。
(a2)根据所述目标对象的实际高度、所述抠像图像的高度Height、所述最大Y坐标Ymax,以及最小Y坐标Ymin计算获得所述缩放比例ScaleY。
本实施例中,执行模块302预先存储了所述目标对象的实际高度。为清楚说明本发明,本实施例以所述目标对象的实际高度为1.7米为例。
举例而言,请结合图5和图7所示,假设面片模型4的高度CD=1米;目标对象2的实际高度为1.7米即EF=1.7米;那么CD/AB=Height/(Ymax-Ymin);
ScaleY=GH/CD;
GH/EF=CD/AB;
GH=(1080/(Ymax-Ymin))*EF;
GH=(1080/(915-162))*1.7=2.438;
ScaleY=2.438/1=2.438。即得到缩放比例ScaleY为2.438。
步骤S4、执行模块302根据所述缩放比例ScaleY调整所述面片模型,使得所述目标对象在所述面片模型中的高度等于所述目标对象的实际高度。
本实施例中,执行模块302基于所述缩放比例ScaleY等比例缩放所述面片模型,使得所述目标对象在所述面片模型中的高度等于所述目标对象的实际高度。
例如,参阅图7所示,所述执行模块302基于所述缩放比例ScaleY等比例缩放所述面片模型4后获得面片模型5。
步骤S5、执行模块302基于调整后的所述面片模型调整所述目标对象的位置。
本实施例中,所述基于调整后的所述面片模型调整所述目标对象的位置包括(b1)-(b4):
(b1)从调整后的所述面片模型中设定所述目标对象的起始站点。
(b2)从调整后的所述面片模型中为所述目标对象设定目标站点。
本实施例中,所述目标对象的起始站点为第一坐标点与第二坐标点之间的连线的中点,其中,所述第一坐标点所对应的X坐标为所述最小X坐标Xmin,该第一坐标点所对应的Y坐标为所述最大Y坐标Ymax;所述第二坐标点所对应的X坐标为所述最大X坐标Xmax,该第二坐标点所对应的Y坐标为所述最大Y坐标Ymax;所述目标站点为调整后的所述面片模型的下边缘的中点。
举例而言,参阅图8所示,目标对象2在面片模型5中所对应的矩形边框的四个坐标点为E’,E,F’,F。由于所述面片模型5是执行模块302基于所述缩放比例ScaleY等比例缩放所述面片模型4所获得,且所述面片模型4的宽高比例与所述抠像图像的宽高比例一致,因此,所述面片模型5的图片像素长宽也仍然为Width=1920;height=1080;该目标对象2在面片模型5中所对应的矩形边框的四个坐标点E’,E,F’,F的坐标分别与所述目标对象2在所述抠像图像3中所对应的四个目标坐标点P1,P2,P3,P4的坐标一致,即该目标对象2在面片模型5中所对应的矩形边框的四个坐标点分别为E’(Xmin,Ymin),E(Xmax,Ymin),F’(Xmin,Ymax),F(Xmax,Ymax)。
因此,执行模块302可以设定坐标点F’与坐标点F之间的连线的中点I作为所述目标对象的起始站点;以及设定调整后的面片模型5的下边缘的中点T作为所述目标对象的目标站点。
(b3)计算所述目标对象从所述起始站点移动到所述目标站点的插值。
(b4)根据所述插值TransformI移动调整后的所述面片模型。
具体地,执行模块302可以按照如下方式来计算坐标点I移动到坐标点T的插值TransformI。TransformI包括TransformI.Z(即在Z轴方向上所要移动的距离)、TransformI.X(即在X轴方向上所要移动的距离)、TransformI.Y(即在Y轴方向上所要移动的距离)。
其中,由于坐标点T的z轴和坐标点A的z轴一致,因此,TransformI.Z=T.Z;即无需计算TransformI.Z。TransformI.X=JT两点的距离;TransformI.Y=IJ两点的距离。
其中,IJ/HG=(Height-Ymax)/Height;
IJ=((1080-915)/1080)*2.438;
IJ=0.3724米;
JT=HH’-(HJ+TH’);
HJ=(Xmax-Xmin)/2+Xmin;
TH’=Width/2;
HH’=ScaleY*1.7778;
JT/HH’=(Width-((Xmax-Xmin)/2+Xmin+Width/2))/Width;
JT=((1920-((1058-863)/2+863+1920/2))/1920)*2.438*1.7778;
JT=-0.0011米。
由此执行模块302计算获得TransformI的数值。执行模块302即可根据TransformI的数值移动所述面片模型5。例如首先沿Y轴移动IJ=0.3724米;然后沿X轴移动JT=-0.0011米,由此实现对目标对象2的位置的调整,将所述目标对象2的位置调整到影像的居中位置。
根据本案上述方法步骤,可以看出本案通过一个抠像好的图像把目标对象调整设置到合理大小,然后放到场景理想的位置如居中位置。由此当在实际应用场景中例如对老师授课直播时,不会因为目标对象即授课老师的脚步在拍摄设备33的画面中移动而导致授课老师的位置在虚拟环节中脱节如脚步悬空等问题。此外,本案还可以自动调节目标对象即授课老师的位置居中。
需要说明的是,在本发明所提供的几个实施例中,应该理解到,所揭露的非易失性可读存储介质,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。
对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或,单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。

Claims (9)

1.一种目标对象调整方法,其特征在于,所述方法包括:
利用拍摄设备实时拍摄目标对象的影像,并从所拍摄的影像中,确定所述目标对象所对应的每个目标像素点的RGB数据;
对所拍摄的影像作抠像处理获得抠像图像;
基于所述目标对象所对应的每个目标像素点的RGB数据以及所述抠像图像创建一个面片模型,所述面片模型的宽高比例与所述抠像图像的宽高比例一致;
基于所述面片模型以及所述目标对象的实际高度计算一个缩放比例ScaleY;
根据所述缩放比例ScaleY调整所述面片模型;及
基于调整后的所述面片模型调整所述目标对象的位置。
2.如权利要求1所述的目标对象调整方法,其特征在于,所述基于所述面片模型以及所述目标对象的实际高度计算一个缩放比例ScaleY包括:
确定所述目标对象在所述抠像图像中所对应的最大Y坐标Ymax,以及最小Y坐标Ymin;及
根据所述目标对象的实际高度、所述抠像图像的高度height、所述最大Y坐标Ymax,以及最小Y坐标Ymin计算获得所述缩放比例ScaleY。
3.如权利要求2所述的目标对象调整方法,其特征在于,该方法还包括:
通过将所述抠像图像中每个像素的Alpha通道的数值与预设值的比较,确定所述目标对象在所述抠像图像中所对应的最大Y坐标Ymax、最小Y坐标Ymin、最大X坐标Xmax,以及最小X坐标Xmin。
4.如权利要求3所述的目标对象调整方法,其特征在于,所述基于调整后的所述面片模型调整所述目标对象的位置包括:
从调整后的所述面片模型中设定所述目标对象的起始站点;
从调整后的所述面片模型中为所述目标对象设定目标站点;
计算所述目标对象从所述起始站点移动到所述目标站点的插值TransformI;及
根据所述插值TransformI移动调整后的所述面片模型。
5.如权利要求4所述的目标对象调整方法,其特征在于,所述目标对象的起始站点为第一坐标点与第二坐标点之间的连线的中点,其中,所述第一坐标点所对应的X坐标为所述最小X坐标Xmin,该第一坐标点所对应的Y坐标为所述最大Y坐标Ymax;所述第二坐标点所对应的X坐标为所述最大X坐标Xmax,该第二坐标点所对应的Y坐标为所述最大Y坐标Ymax;所述目标站点为调整后的所述面片模型的下边缘的中点。
6.如权利要求1所述的目标对象调整方法,其特征在于,该方法中,根据所获取的抠图参数对实景图像作抠像处理获得所述抠像图像。
7.如权利要求6所述的目标对象调整方法,其特征在于,该方法还包括:
按照预设的频率从服务器获取所述抠图参数;
将所获取的抠图参数与本地存储的抠图参数进行比较;及
若所获取的抠图参数与本地存储的抠图参数不一致,调整所述频率,并更新本地存储的抠图参数为当前从所述服务器所获取的抠图参数。
8.一种计算机装置,其特征在于,所述计算机装置包括存储器和处理器,所述存储器用于存储至少一个指令,所述处理器用于执行所述至少一个指令时实现如权利要求1至7中任意一项所述目标对象调整方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有至少一个指令,所述至少一个指令被处理器执行时实现如权利要求1至7中任意一项所述目标对象调整方法。
CN202010740620.4A 2020-07-28 2020-07-28 目标对象调整方法、计算机装置及存储介质 Active CN111885306B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010740620.4A CN111885306B (zh) 2020-07-28 2020-07-28 目标对象调整方法、计算机装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010740620.4A CN111885306B (zh) 2020-07-28 2020-07-28 目标对象调整方法、计算机装置及存储介质

Publications (2)

Publication Number Publication Date
CN111885306A CN111885306A (zh) 2020-11-03
CN111885306B true CN111885306B (zh) 2021-12-07

Family

ID=73201512

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010740620.4A Active CN111885306B (zh) 2020-07-28 2020-07-28 目标对象调整方法、计算机装置及存储介质

Country Status (1)

Country Link
CN (1) CN111885306B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113473207B (zh) * 2021-07-02 2023-11-28 广州博冠信息科技有限公司 直播方法、装置、存储介质及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107396001A (zh) * 2017-08-30 2017-11-24 郝翻翻 一种记录人物的方法
CN110012264A (zh) * 2017-11-13 2019-07-12 广州必威易微播科技有限责任公司 一种视频实时处理合成系统及方法
CN110717914A (zh) * 2019-09-11 2020-01-21 北京迈格威科技有限公司 人体抠像的方法和装置
CN110909579A (zh) * 2018-09-18 2020-03-24 杭州海康威视数字技术股份有限公司 一种视频图像处理方法、装置、电子设备及存储介质
CN111161288A (zh) * 2019-12-26 2020-05-15 郑州阿帕斯数云信息科技有限公司 图像处理方法和装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103337079A (zh) * 2013-07-09 2013-10-02 广州新节奏智能科技有限公司 一种虚拟增强现实的教学方法及装置
CN105072314A (zh) * 2015-08-13 2015-11-18 黄喜荣 一种可自动跟踪目标的虚拟演播室实现方法
JP6700752B2 (ja) * 2015-12-01 2020-05-27 キヤノン株式会社 位置検出装置、位置検出方法及びプログラム
CN108449569B (zh) * 2018-03-13 2019-04-05 重庆虚拟实境科技有限公司 虚拟会议方法、系统、装置、计算机装置及存储介质
CN109934843B (zh) * 2019-01-28 2021-05-14 北京华捷艾米科技有限公司 一种实时的轮廓精细化抠像方法及存储介质
CN110688962B (zh) * 2019-09-29 2022-05-20 武汉秀宝软件有限公司 人脸图像处理方法、用户设备、存储介质及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107396001A (zh) * 2017-08-30 2017-11-24 郝翻翻 一种记录人物的方法
CN110012264A (zh) * 2017-11-13 2019-07-12 广州必威易微播科技有限责任公司 一种视频实时处理合成系统及方法
CN110909579A (zh) * 2018-09-18 2020-03-24 杭州海康威视数字技术股份有限公司 一种视频图像处理方法、装置、电子设备及存储介质
CN110717914A (zh) * 2019-09-11 2020-01-21 北京迈格威科技有限公司 人体抠像的方法和装置
CN111161288A (zh) * 2019-12-26 2020-05-15 郑州阿帕斯数云信息科技有限公司 图像处理方法和装置

Also Published As

Publication number Publication date
CN111885306A (zh) 2020-11-03

Similar Documents

Publication Publication Date Title
CN111145135B (zh) 一种图像去扰处理方法、装置、设备及存储介质
CN101916175A (zh) 自适应于投影表面的智能投影方法
CN107025881B (zh) 显示单元的校正方法及装置
CN106060491A (zh) 一种投影图像颜色校正方法及装置
CN111694528B (zh) 显示墙的排版辨识方法以及使用此方法的电子装置
CN201904067U (zh) 全彩led显示屏非均匀性逐点校正系统
CN110099220B (zh) 一种全景拼接方法及装置
CN109671388A (zh) 校正数据的获取方法及装置
CN109698913B (zh) 一种图像显示方法、装置和电子设备
CN111885306B (zh) 目标对象调整方法、计算机装置及存储介质
CN102821247B (zh) 显示处理设备及显示处理方法
CN106657947A (zh) 生成图像的方法和摄像装置
EP4261784A1 (en) Image processing method and apparatus based on artificial intelligence, and electronic device, computer-readable storage medium and computer program product
CN112004077A (zh) 屏下摄像头的校准方法、装置、存储介质与电子设备
WO2022105277A1 (zh) 投影控制方法、装置、投影光机及可读存储介质
CN113257181B (zh) Led屏校正图像采集方法、校正方法、采集装置及校正系统
CN111489430A (zh) 游戏的光影数据处理方法、装置以及游戏设备
CN112669769A (zh) 显示屏箱体参数校正方法及装置、设备、存储介质
CN101729739A (zh) 一种图像纠偏处理方法
CN111862339A (zh) 虚拟标签展示方法、装置、设备及计算机可读存储介质
CN105931205A (zh) 一种自动调节照片色彩的方法和移动设备
CN105847690A (zh) 一种切换摄影模式的方法及摄像机
CN115602099A (zh) 显示屏显示调节方法、系统、计算机设备及存储介质
CN112866507B (zh) 智能化的全景视频合成方法、系统、电子设备及介质
CN112988096A (zh) 显示单元定位方法、装置、设备、存储介质和显示装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Target object adjustment method, computer device and storage medium

Effective date of registration: 20221102

Granted publication date: 20211207

Pledgee: Chongqing Longshang financing Company Limited by Guarantee

Pledgor: CHONGQING IVREAL TECHNOLOGY CO.,LTD.

Registration number: Y2022500000092

PC01 Cancellation of the registration of the contract for pledge of patent right
PC01 Cancellation of the registration of the contract for pledge of patent right

Date of cancellation: 20231018

Granted publication date: 20211207

Pledgee: Chongqing Longshang financing Company Limited by Guarantee

Pledgor: CHONGQING IVREAL TECHNOLOGY CO.,LTD.

Registration number: Y2022500000092