CN114630085B - 图像投影方法、装置、存储介质及电子设备 - Google Patents
图像投影方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN114630085B CN114630085B CN202011453378.9A CN202011453378A CN114630085B CN 114630085 B CN114630085 B CN 114630085B CN 202011453378 A CN202011453378 A CN 202011453378A CN 114630085 B CN114630085 B CN 114630085B
- Authority
- CN
- China
- Prior art keywords
- projection
- projector
- image
- area
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000003860 storage Methods 0.000 title claims abstract description 11
- 230000000007 visual effect Effects 0.000 claims abstract description 30
- 238000012937 correction Methods 0.000 claims description 25
- 238000012545 processing Methods 0.000 claims description 14
- 238000004088 simulation Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 5
- 230000004888 barrier function Effects 0.000 claims 1
- 230000000694 effects Effects 0.000 abstract description 26
- 230000006870 function Effects 0.000 description 20
- 230000008569 process Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 11
- 238000007726 management method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000013527 convolutional neural network Methods 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 5
- 238000003062 neural network model Methods 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 238000007477 logistic regression Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000003066 decision tree Methods 0.000 description 3
- 238000002372 labelling Methods 0.000 description 3
- 210000002569 neuron Anatomy 0.000 description 3
- 230000000306 recurrent effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000003702 image correction Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000012502 risk assessment Methods 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 241000196324 Embryophyta Species 0.000 description 1
- 235000009470 Theobroma cacao Nutrition 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 244000240602 cacao Species 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000004418 eye rotation Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3141—Constructional details thereof
- H04N9/3173—Constructional details thereof wherein the projection device is specially adapted for enhanced portability
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Geometry (AREA)
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
本申请实施例公开了一种图像投影方法、装置、存储介质及电子设备,其中,方法包括:采集当前环境中包含目标对象的目标图像,在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。采用本申请实施例,可以提高图像的实时显示效果。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种图像投影方法、装置、存储介质及电子设备。
背景技术
随着通信技术的发展,终端上的功能也在不断增加。终端上的功能也越来越广泛,用户可以使用终端的功能,满足日常生活中的需求。目前,终端可以提供图像显示以及图像采集功能,可以通过终端所包含的摄像头采集包含目标对象(如终端的使用者)的图像,终端可以将采集的图像在当前屏幕上及时进行显示,以方便用户及时观察图像效果。
发明内容
本申请实施例提供了一种图像投影方法、装置、存储介质及电子设备,可以为业务线程分配到合适的处理器集群。本申请实施例的技术方案如下:
第一方面,本申请实施例提供了一种图像投影方法,所述方法包括:
采集当前环境中包含目标对象的目标图像;
在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。
第二方面,本申请实施例提供了一种图像投影装置,所述装置包括:
图像采集模块,用于采集当前环境中包含目标对象的目标图像;
图像投影模块,用于在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。
第三方面,本申请实施例提供一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述的方法步骤。
第四方面,本申请实施例提供一种电子设备,可包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行上述的方法步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括:
在本申请一个或多个实施例中,终端采集当前环境中包含目标对象的目标图像,在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。采用本申请实施例,实现了对同一目标对象进行图像采集的同时,可方便目标对象实时观看目标图像的显示效果,避免相关技术中目标对象在终端采集目标图像时使用者无法或难以实时观察图像显示效果,大幅提高图像显示的便捷性和图像实时显示的效果;另外,基于配合使用的投影器不同于相关技术中独立设置的投影仪,投影器作为终端的一种辅助投影器件可以内置作为终端的一部分,或也可以作为单独的一个模块在使用时进行装载搭配,保障以及提高了图像显示的便捷性和实用性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种图像投影方法的流程示意图;
图2是本申请实施例提供的一种投影器所对应的场景示意图;
图3是本申请实施例提供的一种涉及终端所包含投影器的场景示意图;
图4是本申请实施例提供的一种投影器与终端配合使用的场景示意图;
图5是本申请实施例提供的一种终端后置摄像头采集目标图像的场景示意图;
图6是本申请实施例提供的另一种图像投影方法的流程示意图;
图7是本申请实施例提供的一种图像投影装置的结构示意图;
图8是本申请实施例提供的一种图像投影模块的结构示意图;
图9是本申请实施例提供的一种电子设备的结构示意图;
图10是本申请实施例提供的操作系统和用户空间的结构示意图;
图11是图9中安卓操作系统的架构图;
图12是图9中IOS操作系统的架构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在本申请的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。在本申请的描述中,需要说明的是,除非另有明确的规定和限定,“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本申请中的具体含义。此外,在本申请的描述中,除非另有说明,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
下面结合具体的实施例对本申请进行详细说明。
在一个实施例中,如图1所示,特提出了一种图像投影方法,该方法可依赖于计算机程序实现,可运行于基于冯诺依曼体系的图像投影装置上。该计算机程序可集成在应用中,也可作为独立的工具类应用运行。
所述图像投影装置可以是一种终端,终端可以是具有图像投影功能的电子设备,该电子设备包括但不限于:可穿戴设备、手持设备、个人电脑、平板电脑、车载设备、智能手机、计算设备或连接到无线调制解调器的其它处理设备等。在不同的网络中终端设备可以叫做不同的名称,例如:用户设备、接入终端、用户单元、用户站、移动站、移动台、远方站、远程终端、移动设备、用户终端、终端、无线通信设备、用户代理或用户装置、蜂窝电话、无绳电话、个人数字处理(personal digital assistant,PDA)、5G网络或未来演进网络中的终端设备等。
具体的,该图像投影方法包括:
步骤S101:采集当前环境中包含目标对象的目标图像;
所述目标对象可以理解为终端所包含的图像采集器件(如摄像头、红外成像仪)可采集的当前终端所处环境下待采集的图像对象,所述目标对象可以是小孩、老人、宠物、植物、建筑物等。
所述目标图像可以理解为对采集的目标对象所处环境一种相似性、生动性的描述或写真,通过目标图像(可以理解为包含目标对象的图像)的方式来客观表示所述目标对象所处当前环境场景中相关的图像信息(如目标对象的外貌特征、环境中的活动物体等等),其中,所述目标图像可以是以照片、视频片段、完整视频等多媒体形式,当目标图像是以视频的形式采集时,终端可以控制所包含的麦克风组件采集当前环境中的声音信息。
另外,在相关技术中,通常在采集目标图像之后,如采集终端使用者当前的图像(如自拍照),通常将目标图像在终端所包含的屏幕上进行实时显示,但是在日常使用的一些场景下,通常由于客观因素(如屏幕显示区域太小,不足以终端使用者查阅)限制,在终端屏幕上进行目标图像的显示存在一定的图像显示局限性,图像显示的效果往往不佳;在本申请中,终端采集当前环境中包含目标对象的目标图像之后,通常执行本申请的图像投影方法不再屏幕在进行显示,而是通过与终端配合使用的投影器进行图像的实时投影,基于配合使用的投影器不同于相关技术中独立设置的投影仪,投影器作为终端的一种辅助投影器件可以内置作为终端的一部分,或也可以作为单独的一个模块在使用时进行装载搭配,在保障图像显示的便捷性和实用性的同时,可以大幅提高图像的显示效果。
在一些实施方式中,所述投影器为终端的一部分,也即在终端出厂前,投影器作为终端相应的硬件模块配置在所述终端上。如图2所示,图2是投影器所对应的场景示意图,图2中,终端的可扩展部件即为可扩展投影器,此时投影器即作为终端的一部分,与终端配合使用,从而将终端通过所包含的图像采集器件(如前置摄像头、后置摄像头)采集的包含目标对象的目标图像,通过与可扩展投影器相传动连接的驱动电机进行目标图像的投影控制,当指定通过控制驱动电机工作以驱动可扩展部件-可扩展投影器进行扩展到相应机械位置,并实时将在当前环境下采集的包含目标对象的目标图像,通过可扩展投影器进行投影。
另外,该投影器作为终端的一部分,也可集成在终端的壳体上,如图3所示,图3是一种涉及终端所包含投影器的场景示意图,投影器可集成在终端的后壳体上,则终端的用户在使用时,可如图3所示,通过终端的前置摄像头采集当前环境下包含目标对象(也即终端的用户)的目标图像(目标用户所处房间内的图像),然后通过后置壳体上的投影器将目标图像投影在天花板对应的投影平面上。
在一些实施方式中,所述投影器为与终端配合使用的一种外部设备,投影器作为一种实体装置可作为终端的一种外置可扩展模块,该外置可扩展模块在一些实施场景下仅用于对终端所采集的目标图像进行投影,在本申请中,所述投影器需与终端配合使用不能作为一个单独的装置进行单独使用,如独立投影,投影器在使用时可通过使用者配置在终端外壳体的周侧、或配置在终端所处环境中,如图4所示,图4是一种投影器与终端配合使用的场景示意图,在图4中,投影器(如图4中的投影仪)与终端可通过卡合方式、磁吸方式、机械固定等方式固定在终端的壳体上;在投影器与终端进行配合使用的场景下,如投影器对终端通过前置摄像头所采集的目标图像进行投影的场景下,如采集的图4中的包含目标对象(图4中的用户),终端与投影器预先基于通信网络建立通信连接,终端可以通与其配合使用的投影器将目标图像进行投影,如将目标图像投影在终端所处的当前环境中的投影面上(如图4中的天花板对应的投影平面上)。
其中,通信网络可以是无线网络,也可以是有线网络,无线网络包括但不限于移动通信网络、无线局域网、红外网络或蓝牙网络,有线网络包括但不限于以太网、通用串行总线(universal serial bus,USB)或控制器局域网络。以下对本申请所涉及的一种示意行的使用场景进行详细释义,
在一种具体的实施场景中,终端可以接收用户针对自媒体录制模式的开启操作,终端响应于该开启操作,控制所包含的后置摄像头采集当前环境中包含的目标对象的目标图像。
所述自媒体录制模式为终端的用户作为新闻制造主体进行内容创造的一种媒体录制模式,终端具有自媒体录制功能,用户可通过常用的人机操作在终端上开启自媒体录制模式。在实际应用中,用户可以操作终端开启自媒体录制模式,进行小视频、动画片段、视频片段、在线直播等形式的自媒体录制。
在一种示意性的场景中,用户可通过操作终端针对自媒体录制模式(如直播视频在线录制)输入开启操作,通过网络的方式将采集的包含直播对象(如产品、人物、景物等)的目标图像进行录制,进一步,终端的后置摄像头通常图像录制效果较好,为了更好的完成自媒体录制,如图5所示,图5是一种终端后置摄像头采集目标图像的场景示意图,终端可以采用后置摄像头进行录制,即录制包含目标对象的目标图像,然而在实际应用中,终端在开启后置摄像头进行录制时,一方面会存在通常终端的屏幕与后置摄像头通常设置在不同面上(如后置摄像头设置在终端的背面,屏幕设置在终端的前面),以及一方面由于终端的用户进行自媒体录制时,终端通常不再自媒体录制者的有效视角范围内(如用户在离终端位置较远时无法实时看清终端在屏幕在实时显示的目标图像);基于此,终端可以通与其配合使用的投影器将目标图像进行投影,如将目标图像投影在终端所处的当前环境中的投影面上(如墙面、墙体、固定的幕布上)。
可选的,用户针对自媒体录制模式的开启操作输入方式有多种,可以是通过与终端相连接的外部设备完成的,例如,用户可以通过连接终端(如智能穿戴设备、手机)的激光笔/鼠标等外部设备选中当前相应的自媒体录制的图标输入的开启操作;可以是用户通过语音输入针对终端开启自媒体录制功能的开启操作(例如语音输入开针对终端的自媒体录制,以获取当前环境中包含的目标对象的目标图像等);可以是用户通过终端(如手机)所包含的摄像头采集用户的手势控制指令完成开启特定的开启操作,还可以是通过按压终端手机)的物理按键(开关机键、音量键等)输入的针对终端的开启操作等,
步骤S102:在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。
所述投影区域为终端将目标图像通过控制投影器进行投影显示时的图像显示区域。
在本申请中,所述投影区域与目标对象的视角范围强相关,本申请图像投影方法在于可以借助于投影器而非终端的屏幕对实时采集的包含目标对象的目标图像进行图像显示,在一些场景中,终端的使用者通常也即目标图像所包含的目标对象,如自媒体录制场景中的直播场景,而目标对象与终端的距离通常较远,目标对象在视角范围内容难以通过终端的屏幕观察清楚目标图像,而采用投影器对目标图像进行投影,投影显示的投影图像较目标图像而言图像显示范围更大,便于在终端的使用者(如目标对象)进行图像采集时可以便捷清楚的看清楚所采集的图像效果。
实际应用中,终端控制投影器将采集到的图像投影到投影区域的集成投影方式。终端控制投影器将包含目标对象的目标图像从目标对象视角方向处向外投影到前向的墙壁、表面、桌子、临时墙壁、屏幕、天花板和其它投影面上。可以理解的是投影仪的投影方向通常与目标对象的视角方向匹配,如投影方式与视角方向处于同一方向上,以便于目标对象在通过终端采集目标图像的同时,可清楚实时观察到目标图像通过投影器投影出的投影画面。
在一些实施例中,终端可通过计算投影器的投影方位以及结合所包含的(图像)处理器通过图像校正来实现的自动聚焦、自动梯形失真、自动颜色调整和自动表面修整。
可选实施例中可使用终端中的处理器来实行目标图像对应的投影图像的数字校正。也称作梯形失真的梯形失真校正,通过该梯形失真校正允许未垂直于终端的水平中心线或目标对象的视角水平中心向(例如,抬高或太低)配置的投影器使输出图像歪斜的功能,从而使图像看起来为矩形的。梯形失真校正提供这样的能力,即有意使输出图像“失真”以重新产生由图像源(采集的目标图像)提供的原始矩形图像,因而消除歪斜输出,如果不这样则会由于成角度投影而产生歪斜输出;
可选实施例中可使用终端中的处理器来实行投影器的投影方位的校正,允许未垂直于终端的水平中心线或目标对象的视角水平中心向(例如,抬高或太低)配置的投影器通过相应器件方位调整校正,以使投影器的投影方位尽可能的垂直于终端的水平中心线或目标对象的视角水平中心向上,从而重新产生由图像源(采集的目标图像)提供的原始矩形图像。
进一步的,终端可预先确定所述目标图像在所述当前环境中的投影方位,也即通过对目标图像中的目标对象进行图像识别,确定目标对象对应的视角方位,基于该视觉方位来确定投影方位,在一些实施方式中,视角方位与投影方位的方位角度差值小于预设的角度阈值,从而可确定所述目标图像在所述当前环境中的投影方位,进而确定所述投影器沿所述投影方位对应的投影区域,另外,在投影器难以通过图像校正的方式(如梯形失真校正)产生由图像源(采集的目标图像)提供的原始矩形图像时,终端可控制投影器进行方位调整,如旋转至相应角度,以使投影器的投影方位尽可能的垂直于终端的水平中心线或目标对象的视角水平中心向上,从而重新产生由图像源(采集的目标图像)提供的原始矩形图像。
在一种具体的实施场景中,终端在确定所述目标图像的投影区域之前,还可以对投影器的图像投影效果进行校正调整,如下
终端可以控制投影器在所述投影区域进行模拟投影处理,得到模拟投影图像;其中模拟投影处理可以是终端采用预存储的模拟校正图像进行投影,然后采集模拟投影图像。
终端然后确定所述模拟投影图像的图像倾斜特征,基于所述图像倾斜特征确定所述投影器的校正参数;
另外,模拟校正图像并非随意选取的图像,而是为校正所设置的包含用于投影校正的图像参照点的图像,可辅助终端在获取到对应的模拟投影图像之后,计算模拟校正图像的特征点和模拟投影图像中的特征点之间的图像倾斜特征,基于图像倾斜特征进行校正处理,其中图像倾斜特征也即两图像中特征点的偏移参数(如偏移差值、偏移角度、偏移距离),从而可以基于预设的偏移校正算法计算出校正参数,所述校正参数为投影器的投影工作参数。
终端然后基于所述校正参数对所述投影器的标准投影参数进行校正,在完成校正之后,控制所述投影器在所述投影区域投影所述目标图像。
在本申请实施例中,终端采集当前环境中包含目标对象的目标图像,在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。采用本申请实施例,实现了对同一目标对象进行图像采集的同时,可方便目标对象实时观看目标图像的显示效果,避免相关技术中目标对象在终端采集目标图像时使用者无法或难以实时观察图像显示效果,大幅提高图像显示的便捷性和图像实时显示的效果;另外,基于配合使用的投影器不同于相关技术中独立设置的投影仪,投影器作为终端的一种辅助投影器件可以内置作为终端的一部分,或也可以作为单独的一个模块在使用时进行装载搭配,保障以及提高了图像显示的便捷性和实用性。
请参见图6,图6是本申请提出的一种图像投影方法的另一种实施例的流程示意图。具体的:
步骤S201:采集当前环境中包含目标对象的目标图像;
具体可参见步骤S101,此处不再赘述。
S202、基于所述目标图像确定所述目标对象的视觉特征,基于所述视觉特征确定所述目标图像在所述当前环境中的投影方位。
所述空间位姿为所述目标对象在终端所述环境中的位姿,可理解为可移动目标对象的位置、姿态信息,即目标对象在空间中所处的位置和/或其在该位置上的姿态。在本实施例中,所述姿态数据可以理解为目标对象(如终端的使用者)在空间中所处的位置和/或其在该位置上的姿态,通过该空间位姿可以用于表征或用于量化目标对象当前的姿态。在一些实施例中,所述空间位姿以目标对象相对于终端的位置参数、距离参数、角度参数等参数来表征。
所述视角特征可以理解为目标对象的视觉相关联的参数,如目标对象的观察视角,可以理解为目标对象视线相对于其平视状态下的空间偏移角度或目标对象视线相对于终端指定平面上的角度(如水平面上的夹角);又如目标对象的视角范围;又如目标对象终端间相对视角距离或相对视角角度等
在本申请中,终端基于目标图像确定所述目标对象的视觉特征的方式可以是多种,如采用计算机图形图像处理法,该方法是利用目标对象眼转动时相关特征之间的变动关系进行视角测量。这些特征有普尔钦斑中心、虹膜中心、眼角、瞳孔中心等。例如。普尔钦斑点法,其原理是,在拍摄镜头对目标对象脸进行成像时,在一定的光照和角度下,成像的人眼瞳孔中会产生一个高亮度的普尔钦斑,该斑点中心的位置与瞳孔中心的位置有一定的对应关系。测量人脸中的这些生理特征之间的关系,从而测量出目标对象的一些视角参数,如目标对象的观察视角、目标对象的视角范围、相对距离等等。
可选的,可以预先基于目标对象对视角信息进行获取,如构造目标对象观察各种视角与眼参数(双眼中心的距离、鼻梁线与双眼中心的夹角等)的参数矩阵,并利用Adaboost算法,从而检测眼视角、视角范围等等,此处不作具体限定
具体的,终端基于所述视觉特征确定所述目标图像在所述当前环境中的投影方位,可以是将视觉特征对应的各视觉参数(如观察视角、视角范围、相对距离等)输入至预先训练好的方位确定模型中,输出所述目标图像在所述当前环境中对应的投影方位。
其中,通过预先获取实际投影环境中的大量样本数据(可以是多个终端上针对目标对象的投影调整数据),提取特征信息(也即各视觉参数以及对应的参考投影效果),并对所述样本数据进行标注,创建初始的方位确定模型。所述方位确定模型可以是使用大量的样本数据对初始的方位确定模型进行训练的,如方位确定模型可以是基于逻辑回归模型(Logistic Regression,LR)、支持向量机(Support Vector Machine,SVM)、决策树、朴素贝叶斯分类器、卷积神经网络(Convolutional Neural Network,CNN)、递归神经网络(RecurrentNeural Networks,RNN)等中的一种或多种实现,基于已经标注标定投影方位的样本数据对初始的方位确定模型进行训练,可以得到训练好的方位确定模型。
S203、确定所述投影器在所述当前环境对应的投影平面,确定所述投影器沿所述投影方位投影时对应的参考显示区域,所述参考显示区域在所述投影平面上。
具体的,终端可以预先从当前环境中确定可以从目标对象视角方向处向外投影到前向的墙壁、表面、桌子、临时墙壁、屏幕、天花板等至少一种投影物对应的参考投影平面,然后从参考投影平面中确定一个合适的投影平面。
终端可通过所包含的检测装置,如微波雷达、图像采集器等,获取投影器在所述当前环境对应的至少一个参考投影平面,以客厅直播场景为例,用户在客厅直播时,需要投影直播采集的实时直播画面,通过查看投影的实时直播画面来进行相应直播效果的评估。此时,参考投影平面大体包括:墙面、地面、天花板、冰箱、桌子、置物架等,终端首先可以对投影平面面积较小的参考平面进行平面滤除(如设置有一面积阈值,对小于面积阈值的参考平面进行滤除);
在一种可行的实施方式中,通过测算当前环境中各参考平面的平面面积、参考投影平面与投影仪间的相对距离、平面投影障碍物面积(如杯子、花瓶等影响投影器投影画面的展示效果的物体)等参数中的一种或多种的拟合,综合确定投影平面。
在一种可行的实施方式中,通常终端所处环境中的参考投影平面的范围往往可以基于用户使用的频次确定,将频次最高且又属于当前环境中的参考投影平面作为最终的投影平面。
在一种可行的实施方式中,终端可以接收用户所输入的投影平面信息,也即由用户主观选择一个投影平面然后用户只需在终端上输入该投影平面信息即可,如用户可通语音方式输入投影面为墙壁、通过手指触控的方式选中终端提供若干参考投影选项中的一个最终投影平面选项,等等。
具体的,终端确定所述投影器在所述当前环境对应的投影平面之后,还需确定所述投影器沿所述投影方位投影时对应的参考显示区域,其中,所述参考显示区域用于指示所述投影器将目标图像投影至该参考显示区域,通常该参考显示区域的范围要远大于最后确定的投影区域的范围。
具体的,终端在确定投影平面之后,可以对投影仪投影时在该投影平面上障碍物对应的障碍区域进行确定,以在确定参考显示区域避开所述障碍物在投影平面上的障碍区域。
S204、基于所述投影方位以及所述投影平面,控制所述投影器进行投影调整。
在本申请中,终端在确定所述投影方位以及所述投影平面之后,控制所述投影器进行位姿调整的目的在于,将投影器所对应的投影角度调整至与所述投影方位相匹配,并能使投影器投影的画面失真率控制在一个合理范围内。
在一种可行的实施方式中,基于所述投影方位以及所述投影平面,确定所述投影器对应的投影调整参数,所述投影调整参数包括位姿调整参数以及投影工作参数;
其中,所述投影调整参数包括调整角度、调整位置以及调整位移中的至少一种,投影调整参数主要用户对投影器的位姿进行调整,以使投影器工作时的投影画面处于所述投影平面;
所述投影工作参数为投影器的工作常用指标参数,在投影器的位姿确定时,还需确定诸如画面尺寸、投影距离、扫描频率、分辨率、镜头倍数等等。
在本申请中,终端可以基于投影方位来确定投影器所对应的投影角度,在一些实施方式中,可将投影角度与所述投影方位的角度差值调制至角度阈值范围内即可,其中角度阈值为预先采集大量样本调整数据,采用数理统计方式,确定的一个概率值。
终端在基于投影方位来确定投影器所对应的投影角度之后,可以实时控制投影器基于所述投影调整参数调整至投影角度对应的位置,然后在获取投影平面所处的位置信息(如角度参数、距离参数、面积参数等等),确定相应的投影工作参数。
进一步的,终端预先训练有工作参数确定模型,所述工作参数确定模型在完成上述过程后,终端即完成所述控制述投影器基于所述投影调整参数进行投影调整的过程。
其中,所述工作参数确定模型为一种神经网络模型,通过预先获取实际投影环境中的大量投影样本数据,提取特征信息(也即投影工作参数、投影平面所处的位置信息),并对所述样本数据进行标注(标注投影评分),创建初始的工作参数确定模型。所述工作参数确定模型可以是使用大量的样本数据对工作参数确定模型进行训练的,工作参数确定模型可以是基于卷积神经网络(Convolutional Neural Network,CNN)模型,深度神经网络(Deep Neural Network,DNN)模型、循环神经网络(Recurrent Neural Networks,RNN)、模型、嵌入(embedding)模型、梯度提升决策树(Gradient Boosting Decision Tree,GBDT)模型、逻辑回归(Logistic Regression,LR)模型等模型中的一种或多种的拟合实现的。
更进一步的,本实施例中,工作参数确定模型的训练过程可以采用引入误差反向传播算法的DNN-HMM模型创建初始的应用风险分析模型,提取特征信息之后,将特征信息以特征向量的形式输入到所述神经网络模型中,所述神经网络模型的训练过程通常由正向传播和反向传播两部分组成,在正向传播过程中,终端输入样本数据对应的特征信息从所述神经网络模型的输入层经过隐层神经元(也称节点)的传递函数(又称激活函数、转换函数)运算后,传向输出层,其中每一层神经元状态影响下一层神经元状态,在输出层计算实际输出值-工作参数,计算所述实际输出值与期望输出值的期望误差,基于所述期望误差调整所述神经网络模型的参数,所述参数包含每一层的权重值和阈值,训练完成后,生成应用风险分析模型。
具体的,所述期望误差可以是计算实际输出值与期望输出值的均方误差MSE,均方误差MSE,所述均方误差MSE可以采用如下的公式:
其中,m为输出节点个数,p为训练样本数目,为期望输出值,为实际输出值。
在完成上述过程后,终端即完成所述控制述投影器基于所述投影调整参数进行投影调整的过程。
S205、确定投影调整后的所述投影器的投影区域。
具体的,在完成上述对投影器的调整之后,即可完成对投影器投影模式的更新,从而可以确定出投影模式更新后的投影区域。
S206、控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。
具体可参见步骤102,此处不再赘述。
在本申请实施例中,终端采集当前环境中包含目标对象的目标图像,在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。采用本申请实施例,实现了对同一目标对象进行图像采集的同时,可方便目标对象实时观看目标图像的显示效果,避免相关技术中目标对象在终端采集目标图像时使用者无法或难以实时观察图像显示效果,大幅提高图像显示的便捷性和图像实时显示的效果;另外,基于配合使用的投影器不同于相关技术中独立设置的投影仪,投影器作为终端的一种辅助投影器件可以内置作为终端的一部分,或也可以作为单独的一个模块在使用时进行装载搭配,保障以及提高了图像显示的便捷性和实用性。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
请参见图7,其示出了本申请一个示例性实施例提供的图像投影装置的结构示意图。该图像投影装置可以通过软件、硬件或者两者的结合实现成为装置的全部或一部分。该装置1包括图像采集模块11和图像投影模块12。
图像采集模块11,用采集当前环境中包含目标对象的目标图像;
图像投影模块12,用于在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。
可选的,所述图像投影模块12,具体用于
确定所述目标图像在所述当前环境中的投影方位,确定所述投影器沿所述投影方位对应的投影区域。
可选的,如图8所示,所述图像投影模块12,包括:
投影方位确定单元121,用于基于所述目标图像确定所述目标对象的视觉特征,基于所述视觉特征确定所述目标图像在所述当前环境中的投影方位;
显示区域确定单元122,用于所述投影器在所述当前环境中对应的投影平面,确定所述投影器沿所述投影方位投影时对应的参考显示区域,所述参考显示区域在所述投影平面上;
投影区域确定单元123,用于基于所述参考显示区域以及所述投影平面,确定所述投影器的投影区域。
可选的,所述投影区域确定单元123,具体用于:
基于所述投影方位以及所述投影平面,控制所述投影器进行投影调整,并确定投影调整后的所述投影器的投影区域。
可选的,所述投影区域确定单元123,具体用于:
基于所述投影方位以及所述投影平面,确定所述投影器对应的投影调整参数,所述投影调整参数包括位姿调整参数以及投影工作参数;
控制述投影器基于所述投影调整参数进行投影调整。
可选的,所述图像投影模块12,具体用于:
控制投影器在所述投影区域进行模拟投影处理,得到模拟投影图像;
确定所述模拟投影图像的图像倾斜特征,基于所述图像倾斜特征确定所述投影器的校正参数;
基于所述校正参数对所述投影器的标准投影参数进行校正,控制所述投影器在所述投影区域投影所述目标图像。
可选的,所述图像采集模块11,具体用于:
接收针对自媒体录制模式的开启操作,控制所包含的后置摄像头采集当前环境中包含目标对象的目标图像。
需要说明的是,上述实施例提供的图像投影装置在执行图像投影方法时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的图像投影装置与图像投影方法实施例属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
在本申请实施例中,终端采集当前环境中包含目标对象的目标图像,在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。采用本申请实施例,实现了对同一目标对象进行图像采集的同时,可方便目标对象实时观看目标图像的显示效果,避免相关技术中目标对象在终端采集目标图像时使用者无法或难以实时观察图像显示效果,大幅提高图像显示的便捷性和图像实时显示的效果;另外,基于配合使用的投影器不同于相关技术中独立设置的投影仪,投影器作为终端的一种辅助投影器件可以内置作为终端的一部分,或也可以作为单独的一个模块在使用时进行装载搭配,保障以及提高了图像显示的便捷性和实用性。
本申请实施例还提供了一种计算机存储介质,所述计算机存储介质可以存储有多条指令,所述指令适于由处理器加载并执行如上述图1-图6所示实施例的所述图像投影方法,具体执行过程可以参见图1-图6所示实施例的具体说明,在此不进行赘述。
本申请还提供了一种计算机程序产品,该计算机程序产品存储有至少一条指令,所述至少一条指令由所述处理器加载并执行如上述图1-图6所示实施例的所述图像投影方法,具体执行过程可以参见图1-图6所示实施例的具体说明,在此不进行赘述。
请参考图9,其示出了本申请一个示例性实施例提供的电子设备的结构方框图。本申请中的电子设备可以包括一个或多个如下部件:处理器110、存储器120、输入装置130、输出装置140和总线150。处理器110、存储器120、输入装置130和输出装置140之间可以通过总线150连接。
处理器110可以包括一个或者多个处理核心。处理器110利用各种接口和线路连接整个电子设备内的各个部分,通过运行或执行存储在存储器120内的指令、程序、代码集或指令集,以及调用存储在存储器120内的数据,执行电子设备100的各种功能和处理数据。可选地,处理器110可以采用数字信号处理(digital signal processing,DSP)、现场可编程门阵列(field-programmable gate array,FPGA)、可编程逻辑阵列(programmable logicArray,PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(centralprocessing unit,CPU)、图像处理器(graphics processing unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器110中,单独通过一块通信芯片进行实现。
存储器120可以包括随机存储器(random Access Memory,RAM),也可以包括只读存储器(read-only memory,ROM)。可选地,该存储器120包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等,该操作系统可以是安卓(Android)系统,包括基于Android系统深度开发的系统、苹果公司开发的IOS系统,包括基于IOS系统深度开发的系统或其它系统。存储数据区还可以存储电子设备在使用中所创建的数据比如电话本、音视频数据、聊天记录数据,等。
参见图10所示,存储器120可分为操作系统空间和用户空间,操作系统即运行于操作系统空间,原生及第三方应用程序即运行于用户空间。为了保证不同第三方应用程序均能够达到较好的运行效果,操作系统针对不同第三方应用程序为其分配相应的系统资源。然而,同一第三方应用程序中不同应用场景对系统资源的需求也存在差异,比如,在本地资源加载场景下,第三方应用程序对磁盘读取速度的要求较高;在动画渲染场景下,第三方应用程序则对GPU性能的要求较高。而操作系统与第三方应用程序之间相互独立,操作系统往往不能及时感知第三方应用程序当前的应用场景,导致操作系统无法根据第三方应用程序的具体应用场景进行针对性的系统资源适配。
为了使操作系统能够区分第三方应用程序的具体应用场景,需要打通第三方应用程序与操作系统之间的数据通信,使得操作系统能够随时获取第三方应用程序当前的场景信息,进而基于当前场景进行针对性的系统资源适配。
以操作系统为Android系统为例,存储器120中存储的程序和数据如图11所示,存储器120中可存储有Linux内核层320、系统运行时库层340、应用框架层360和应用层380,其中,Linux内核层320、系统运行库层340和应用框架层360属于操作系统空间,应用层380属于用户空间。Linux内核层320为电子设备的各种硬件提供了底层的驱动,如显示驱动、音频驱动、摄像头驱动、蓝牙驱动、Wi-Fi驱动、电源管理等。系统运行库层340通过一些C/C++库来为Android系统提供了主要的特性支持。如SQLite库提供了数据库的支持,OpenGL/ES库提供了3D绘图的支持,Webkit库提供了浏览器内核的支持等。在系统运行时库层340中还提供有安卓运行时库(Android runtime),它主要提供了一些核心库,能够允许开发者使用Java语言来编写Android应用。应用框架层360提供了构建应用程序时可能用到的各种API,开发者也可以通过使用这些API来构建自己的应用程序,比如活动管理、窗口管理、视图管理、通知管理、内容提供者、包管理、通话管理、资源管理、定位管理。应用层380中运行有至少一个应用程序,这些应用程序可以是操作系统自带的原生应用程序,比如联系人程序、短信程序、时钟程序、相机应用等;也可以是第三方开发者所开发的第三方应用程序,比如游戏类应用程序、即时通信程序、相片美化程序、图像投影程序等。
以操作系统为IOS系统为例,存储器120中存储的程序和数据如图12所示,IOS系统包括:核心操作系统层420(Core OS layer)、核心服务层440(CoreServices layer)、媒体层460(Media layer)、可触摸层480(Cocoa Touch Layer)。核心操作系统层420包括了操作系统内核、驱动程序以及底层程序框架,这些底层程序框架提供更接近硬件的功能,以供位于核心服务层440的程序框架所使用。核心服务层440提供给应用程序所需要的系统服务和/或程序框架,比如基础(Foundation)框架、账户框架、广告框架、数据存储框架、网络连接框架、地理位置框架、运动框架等等。媒体层460为应用程序提供有关视听方面的接口,如图形图像相关的接口、音频技术相关的接口、视频技术相关的接口、音视频传输技术的无线播放(AirPlay)接口等。可触摸层480为应用程序开发提供了各种常用的界面相关的框架,可触摸层480负责用户在电子设备上的触摸交互操作。比如本地通知服务、远程推送服务、广告框架、游戏工具框架、消息用户界面接口(User Interface,UI)框架、用户界面UIKit框架、地图框架等等。
在图12所示出的框架中,与大部分应用程序有关的框架包括但不限于:核心服务层440中的基础框架和可触摸层480中的UIKit框架。基础框架提供许多基本的对象类和数据类型,为所有应用程序提供最基本的系统服务,和UI无关。而UIKit框架提供的类是基础的UI类库,用于创建基于触摸的用户界面,iOS应用程序可以基于UIKit框架来提供UI,所以它提供了应用程序的基础架构,用于构建用户界面,绘图、处理和用户交互事件,响应手势等等。
其中,在IOS系统中实现第三方应用程序与操作系统数据通信的方式以及原理可参考Android系统,本申请在此不再赘述。
其中,输入装置130用于接收输入的指令或数据,输入装置130包括但不限于键盘、鼠标、摄像头、麦克风或触控设备。输出装置140用于输出指令或数据,输出装置140包括但不限于显示设备和扬声器等。在一个示例中,输入装置130和输出装置140可以合设,输入装置130和输出装置140为触摸显示屏,该触摸显示屏用于接收用户使用手指、触摸笔等任何适合的物体在其上或附近的触摸操作,以及显示各个应用程序的用户界面。触摸显示屏通常设置在电子设备的前面板。触摸显示屏可被设计成为全面屏、曲面屏或异型屏。触摸显示屏还可被设计成为全面屏与曲面屏的结合,异型屏与曲面屏的结合,本申请实施例对此不加以限定。
除此之外,本领域技术人员可以理解,上述附图所示出的电子设备的结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。比如,电子设备中还包括射频电路、输入单元、传感器、音频电路、无线保真(wireless fidelity,WiFi)模块、电源、蓝牙模块等部件,在此不再赘述。
在本申请实施例中,各步骤的执行主体可以是上文介绍的电子设备。可选地,各步骤的执行主体为电子设备的操作系统。操作系统可以是安卓系统,也可以是IOS系统,或者其它操作系统,本申请实施例对此不作限定。
本申请实施例的电子设备,其上还可以安装有显示设备,显示设备可以是各种能实现显示功能的设备,例如:阴极射线管显示器(cathode ray tubedisplay,简称CR)、发光二极管显示器(light-emitting diode display,简称LED)、电子墨水屏、液晶显示屏(liquid crystal display,简称LCD)、等离子显示面板(plasma display panel,简称PDP)等。用户可以利用电子设备101上的显示设备,来查看显示的文字、图像、视频等信息。所述电子设备可以是智能手机、平板电脑、游戏设备、AR(Augmented Reality,增强现实)设备、汽车、数据存储装置、音频播放装置、视频播放装置、笔记本、桌面计算设备、可穿戴设备诸如电子手表、电子眼镜、电子头盔、电子手链、电子项链、电子衣物等设备。
在图9所示的电子设备中,其中电子设备可以是一种终端,处理器110可以用于调用存储器120中存储的图像投影应用程序,并具体执行以下操作:
采集当前环境中包含目标对象的目标图像;
在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。
在一个实施例中,所述处理器110在执行所述在所述当前环境中确定所述目标图像的投影区域时,具体执行以下操作:
确定所述目标图像在所述当前环境中的投影方位,确定所述投影器沿所述投影方位对应的投影区域。
在一个实施例中,所述处理器110在执行所述确定所述目标图像在所述当前环境中的投影方位,确定所述投影器沿所述投影方位对应的投影区域时,具体执行以下操作:
基于所述目标图像确定所述目标对象的视觉特征,基于所述视觉特征确定所述目标图像在所述当前环境中的投影方位;
确定所述投影器在所述当前环境中对应的投影平面,确定所述投影器沿所述投影方位投影时对应的参考显示区域,所述参考显示区域在所述投影平面上;
基于所述参考显示区域以及所述投影平面,确定所述投影器的投影区域。
在一个实施例中,所述处理器110在执行所述基于所述参考显示区域以及所述投影平面,确定所述投影器的投影区域时,具体执行以下操作:
基于所述投影方位以及所述投影平面,控制所述投影器进行投影调整,并确定投影调整后的所述投影器的投影区域。
在一个实施例中,所述处理器110在执行所述基于所述投影方位以及所述投影平面,控制所述投影器进行投影调整时,具体执行以下操作:
基于所述投影方位以及所述投影平面,确定所述投影器对应的投影调整参数,所述投影调整参数包括位姿调整参数以及投影工作参数;
控制述投影器基于所述投影调整参数进行投影调整。
在一个实施例中,所述处理器110在执行所述控制投影器在所述投影区域投影所述目标图像时,具体执行以下操作:
控制投影器在所述投影区域进行模拟投影处理,得到模拟投影图像;
确定所述模拟投影图像的图像倾斜特征,基于所述图像倾斜特征确定所述投影器的校正参数;
基于所述校正参数对所述投影器的标准投影参数进行校正,控制所述投影器在所述投影区域投影所述目标图像。
在一个实施例中,所述处理器110在执行所述采集当前环境中包含目标对象的目标图像时,具体执行以下操作:
接收针对自媒体录制模式的开启操作,控制所包含的后置摄像头采集当前环境中包含目标对象的目标图像。
在本申请实施例中,终端采集当前环境中包含目标对象的目标图像,在所述当前环境中确定所述目标图像的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内。采用本申请实施例,实现了对同一目标对象进行图像采集的同时,可方便目标对象实时观看目标图像的显示效果,避免相关技术中目标对象在终端采集目标图像时使用者无法或难以实时观察图像显示效果,大幅提高图像显示的便捷性和图像实时显示的效果;另外,基于配合使用的投影器不同于相关技术中独立设置的投影仪,投影器作为终端的一种辅助投影器件可以内置作为终端的一部分,或也可以作为单独的一个模块在使用时进行装载搭配,保障以及提高了图像显示的便捷性和实用性。
本领域的技术人员可以清楚地了解到本申请的技术方案可借助软件和/或硬件来实现。本说明书中的“单元”和“模块”是指能够独立完成或与其他部件配合完成特定功能的软件和/或硬件,其中硬件例如可以是现场可编程门阵列(Field-ProgrammaBLE GateArray,FPGA)、集成电路(Integrated Circuit,IC)等。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些服务接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通进程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(Random AccessMemory,RAM)、磁盘或光盘等。
以上所述者,仅为本公开的示例性实施例,不能以此限定本公开的范围。即但凡依本公开教导所作的等效变化与修饰,皆仍属本公开涵盖的范围内。本领域技术人员在考虑说明书及实践这里的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未记载的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的范围和精神由权利要求限定。
Claims (8)
1.一种图像投影方法,其特征在于,应用于终端,所述方法包括:
采集当前环境中包含目标对象的目标图像;
基于所述目标图像确定所述目标对象的视觉特征,基于所述视觉特征确定所述目标图像在所述当前环境中的投影方位,确定所述投影器沿所述投影方位对应的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内;
其中,所述视觉特征包括以下至少一种视觉参数:观察视角、视角范围和相对距离;
所述确定所述投影器沿所述投影方位对应的投影区域,包括:
获取所述投影器在所述当前环境对应的至少一个参考投影平面,基于各参考投影平面的平面面积、与所述投影仪间的相对距离、平面投影障碍物面积,在所述至少一个参考投影平面中确定投影平面;
确定所述投影器沿所述投影方位投影时对应的参考显示区域,所述参考显示区域在所述投影平面上;
基于所述参考显示区域以及所述投影平面,确定所述投影器的投影区域。
2.根据权利要求1所述的方法,其特征在于,所述基于所述参考显示区域以及所述投影平面,确定所述投影器的投影区域,包括:
基于所述投影方位以及所述投影平面,控制所述投影器进行投影调整,并确定投影调整后的所述投影器的投影区域。
3.根据权利要求2所述的方法,其特征在于,所述基于所述投影方位以及所述投影平面,控制所述投影器进行投影调整,包括:
基于所述投影方位以及所述投影平面,确定所述投影器对应的投影调整参数,所述投影调整参数包括位姿调整参数以及投影工作参数;
控制述投影器基于所述投影调整参数进行投影调整。
4.根据权利要求1所述的方法,其特征在于,所述控制投影器在所述投影区域投影所述目标图像,包括:
控制投影器在所述投影区域进行模拟投影处理,得到模拟投影图像;
确定所述模拟投影图像的图像倾斜特征,基于所述图像倾斜特征确定所述投影器的校正参数;
基于所述校正参数对所述投影器的标准投影参数进行校正,控制所述投影器在所述投影区域投影所述目标图像。
5.根据权利要求1所述的方法,其特征在于,所述采集当前环境中包含目标对象的目标图像,包括:
接收针对自媒体录制模式的开启操作,控制所包含的后置摄像头采集当前环境中包含目标对象的目标图像。
6.一种图像投影装置,其特征在于,所述装置包括:
图像采集模块,用于采集当前环境中包含目标对象的目标图像;
图像投影模块,用于确定所述目标图像在所述当前环境中的投影方位,确定所述投影器沿所述投影方位对应的投影区域,控制投影器在所述投影区域投影所述目标图像,所述投影区域处于所述目标对象的视角范围内;
所述图像投影模块包括:
投影方位确定单元,用于基于所述目标图像确定所述目标对象的视觉特征,基于所述视觉特征确定所述目标图像在所述当前环境中的投影方位;
显示区域确定单元,用于获取所述投影器在所述当前环境对应的至少一个参考投影平面,基于各参考投影平面的平面面积、与所述投影仪间的相对距离、平面投影障碍物面积,在所述至少一个参考投影平面中确定投影平面;
确定所述投影器沿所述投影方位投影时对应的参考显示区域,所述参考显示区域在所述投影平面上;
投影区域确定单元,用于基于所述参考显示区域以及所述投影平面,确定所述投影器的投影区域。
7.一种计算机存储介质,其特征在于,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行如权利要求1~5任意一项的方法步骤。
8.一种电子设备,其特征在于,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行如权利要求1~5任意一项的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011453378.9A CN114630085B (zh) | 2020-12-11 | 2020-12-11 | 图像投影方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011453378.9A CN114630085B (zh) | 2020-12-11 | 2020-12-11 | 图像投影方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114630085A CN114630085A (zh) | 2022-06-14 |
CN114630085B true CN114630085B (zh) | 2024-02-20 |
Family
ID=81895357
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011453378.9A Active CN114630085B (zh) | 2020-12-11 | 2020-12-11 | 图像投影方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114630085B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102111485A (zh) * | 2009-12-29 | 2011-06-29 | 联想(北京)有限公司 | 一种移动终端以及利用该移动终端进行投影的方法 |
CN104750443A (zh) * | 2013-12-31 | 2015-07-01 | 联想(北京)有限公司 | 一种显示控制方法及电子设备 |
CN106454542A (zh) * | 2016-10-31 | 2017-02-22 | 北京小米移动软件有限公司 | 投影处理方法及装置 |
CN108494896A (zh) * | 2018-02-08 | 2018-09-04 | 上海橙旺智能科技有限公司 | 投影终端、投影系统及投影方法 |
CN110703904A (zh) * | 2019-08-26 | 2020-01-17 | 深圳疆程技术有限公司 | 一种基于视线跟踪的增强虚拟现实投影方法及系统 |
CN110996084A (zh) * | 2019-12-24 | 2020-04-10 | 成都极米科技股份有限公司 | 投影图像处理方法、装置、投影设备及存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016224172A (ja) * | 2015-05-28 | 2016-12-28 | 株式会社リコー | 投影システム、画像処理装置、校正方法およびプログラム |
-
2020
- 2020-12-11 CN CN202011453378.9A patent/CN114630085B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102111485A (zh) * | 2009-12-29 | 2011-06-29 | 联想(北京)有限公司 | 一种移动终端以及利用该移动终端进行投影的方法 |
CN104750443A (zh) * | 2013-12-31 | 2015-07-01 | 联想(北京)有限公司 | 一种显示控制方法及电子设备 |
CN106454542A (zh) * | 2016-10-31 | 2017-02-22 | 北京小米移动软件有限公司 | 投影处理方法及装置 |
CN108494896A (zh) * | 2018-02-08 | 2018-09-04 | 上海橙旺智能科技有限公司 | 投影终端、投影系统及投影方法 |
CN110703904A (zh) * | 2019-08-26 | 2020-01-17 | 深圳疆程技术有限公司 | 一种基于视线跟踪的增强虚拟现实投影方法及系统 |
CN110996084A (zh) * | 2019-12-24 | 2020-04-10 | 成都极米科技股份有限公司 | 投影图像处理方法、装置、投影设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114630085A (zh) | 2022-06-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11138434B2 (en) | Electronic device for providing shooting mode based on virtual character and operation method thereof | |
WO2020216025A1 (zh) | 虚拟角色的面部显示方法、装置、计算机设备及可读存储介质 | |
CN110585726A (zh) | 用户召回方法、装置、服务器及计算机可读存储介质 | |
US10304352B2 (en) | Electronic device and method for sharing image | |
US11030733B2 (en) | Method, electronic device and storage medium for processing image | |
CN110163066B (zh) | 多媒体数据推荐方法、装置及存储介质 | |
CN112118477B (zh) | 虚拟礼物展示方法、装置、设备以及存储介质 | |
CN111225138A (zh) | 摄像头的控制方法、装置、存储介质及终端 | |
CN111104980B (zh) | 确定分类结果的方法、装置、设备及存储介质 | |
CN108665510B (zh) | 连拍图像的渲染方法、装置、存储介质及终端 | |
CN108401167B (zh) | 用于视频回放的电子设备和服务器 | |
CN113613028A (zh) | 直播数据处理方法、装置、终端、服务器及存储介质 | |
CN112581358A (zh) | 图像处理模型的训练方法、图像处理方法及装置 | |
CN110929159B (zh) | 资源投放方法、装置、设备及介质 | |
CN114154068A (zh) | 媒体内容推荐方法、装置、电子设备及存储介质 | |
CN111866372A (zh) | 自拍方法、装置、存储介质以及终端 | |
CN110909184A (zh) | 多媒体资源显示方法、装置、设备及介质 | |
CN112023403B (zh) | 基于图文信息的对战过程展示方法及装置 | |
CN114630085B (zh) | 图像投影方法、装置、存储介质及电子设备 | |
CN110837557A (zh) | 摘要生成方法、装置、设备及介质 | |
CN110852093A (zh) | 文本信息生成方法、装置、计算机设备及存储介质 | |
CN112188268B (zh) | 虚拟场景展示方法、虚拟场景的介绍视频生成方法及装置 | |
CN108540726B (zh) | 连拍图像的处理方法、装置、存储介质及终端 | |
CN111367492A (zh) | 网页页面展示方法及装置、存储介质 | |
CN112237743A (zh) | 用户数据统计方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |