CN111093066A - 一种动态平面投影方法及系统 - Google Patents
一种动态平面投影方法及系统 Download PDFInfo
- Publication number
- CN111093066A CN111093066A CN201911220075.XA CN201911220075A CN111093066A CN 111093066 A CN111093066 A CN 111093066A CN 201911220075 A CN201911220075 A CN 201911220075A CN 111093066 A CN111093066 A CN 111093066A
- Authority
- CN
- China
- Prior art keywords
- plane
- picture
- projection
- image
- projected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 230000008859 change Effects 0.000 claims description 32
- 230000002452 interceptive effect Effects 0.000 claims description 29
- 230000003993 interaction Effects 0.000 claims description 14
- 238000009434 installation Methods 0.000 claims description 11
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 210000001061 forehead Anatomy 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000010009 beating Methods 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 238000004898 kneading Methods 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Projection Apparatus (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种动态平面投影方法及系统,方法包括:接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。本发明一种动态平面投影方法及系统,能够实现动态平面的捕捉,以及在捕捉到的动态平面上投射预设画面。
Description
技术领域
本发明涉及图像处理及投影技术领域,具体涉及一种动态平面投影方法及系统。
背景技术
目前,在某些特殊应用场景(在一些暗黑或嘈杂环境),如娱乐场所或密室活动等,当有服务需求时,往往需要通过菜单控制,而传统的控制菜单控制往往需要携带遥控器、手机或者类似设备,使用不够方便;当然也可以通过语音进行控制,但语音控制在背景嘈杂区域无法使用,而且语音控制对于环境中有很多设备时命令太长不易识别,因此可以考虑使用投影菜单实现。此外,为了工作需要或为了增加娱乐性,往往需要在被识别的物体上投放预设画面,以呈现出预设效果。但是,虽然目前投影仪已广泛应用于家庭、办公室、学校和娱乐场所,但现有的投影仪主要是静态应用,即投影仪将画面投射到固定的位置,而不能随着目标位置的变动进行对应的调整,也不能对目标投影物体进行自动识别从而投射不同的画面。
发明内容
本发明的主要目的在于克服现有技术中的上述缺陷,提出一种动态平面投影方法及系统,能够实现动态平面的捕捉,以及在捕捉到的动态平面上投射预设画面。
本发明采用如下技术方案:
根据本发明的第一方面,一种动态平面投影方法,包括:
接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;
控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
作为优选,所述识别所述图像中的平面及平面的运动,具体包括:
根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
作为优选,所述控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动,具体包括:
根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
根据所述畸变计算结果和运动状态计算结果获取待投射的画面,控制投影装置在所述平面上投射对应的画面。
作为优选,所述投影方法还包括:
获取图像中与在所述平面上投射的画面发生的互动行为;
根据所述互动行为计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
作为优选,所述投影方法还包括:
获取图像中与在所述平面上投射的画面发生的互动行为,以及与所述投射的画面发生互动行的外部物体;
根据所述互动行为和外部物体的身份计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
作为优选,对所述外部物体进行身份识别,具体包括:
将各图像捕获装置捕捉到的外部物体,根据空间位置唯一性进行关联,得到所述外部物体的各个角度画面,从可识别角度进行身份识别。
根据本发明的另一方面,一种动态平面投影系统,包括:
平面识别模块,用于接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;
动态投影模块,用于控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
作为优选,所述平面识别模块,具体包括:
实时平面捕捉单元,用于根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
倾角计算单元,用于根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
运动趋势判断单元,用于根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
作为优选,所述动态投影模块,具体包括:
画面畸变计算单元,用于根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
图像运动计算单元,用于根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
图形内容计算单元,用于根据所述畸变计算结果和运动状态计算结果获取待投射的画面,控制投影装置在所述平面上投射对应的画面。
作为优选,所述投影系统还包括:
互动动作捕捉单元,用于获取图像中与在所述平面上投射的画面发生的互动行为;
所述图形内容计算单元还用于根据所述互动行为计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
作为优选,所述投影系统还包括:
互动动作捕捉单元,用于获取图像中与在所述平面上投射的画面发生的互动行为,以及与所述投射的画面发生互动行的外部物体;
身份识别单元,用于识别所述外部物体的身份;
所述图形内容计算单元还用于根据所述互动行为和外部物体的身份计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
作为优选,所述身份识别单元,具体包括:
将各图像捕获装置捕捉到的外部物体,根据空间位置唯一性进行关联,得到所述外部物体的各个角度画面,从可识别角度进行身份识别。
作为优选,所述图像捕获装置包括两个及以上;且至少一个所述图像捕获装置设置在所述投影装置旁边,且所述图像捕获装置于所述投影装置的角度一致。
作为优选,所述投影装置包括一个或多个。
由上述对本发明的描述可知,与现有技术相比,本发明具有如下有益效果:
(1)本发明通过图像捕获装置实现动态平面的捕捉,控制投影装置在捕捉到的动态平面上投射预设画面,并且可以捕获在投射的画面上进行的交互操作;
(2)本发明能够对外部物体进行身份识别,具体为对于多个图像捕获装置捕捉到的外部物体,根据空间位置唯一性进行关联,以得到外部物体的各个角度画面,从而从可识别角度进行身份识别;通过将各图像捕获装置捕获的外部物体关联,使得某一图像捕获装置捕获的外部物体被遮挡,再露出后,由其它角度未被遮挡的图像捕获装置协助被遮挡图像捕获装置将新露出的目标和之前目标进行关联;
(3)本发明能够在根据畸变计算结果、运动状态计算结果或互动行为获取投射画面的变化,控制投影装置在所述平面上投射变化的画面;画面仅在对应动态平面的位置有亮度,其他区域为黑色(无亮度);本发明还可控制投影装置投放多个画面,以同时覆盖多个平面。
上述说明仅是本发明技术方案的概述,为了能够更清楚地了解本发明的技术手段,从而可依照说明书的内容予以实施,并且为了让本发明的上述和其他目的、特征和优点能够更明显易懂,以下列举本发明的具体实施方式。
根据下文结合附图对本发明具体实施例的详细描述,本领域技术人员将会更加明了本发明的上述及其他目的、优点和特征。
附图说明
图1为本发明实施例的动态平面投影方法流程图;
图2为本发明实施例的识别所述图像中的平面及平面的运动的方法流程图;
图3为本发明实施例一的控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面的方法流程图;
图4为本发明实施例一的动态平面投影系统结构框图;
图5为本发明实施例二的控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面的方法流程图;
图6为本发明实施例二的动态平面投影系统结构框图;
图7为本发明实施例三的控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面的方法流程图;
图8为本发明实施例三的动态平面投影系统结构框图。
具体实施方式
以下通过具体实施方式对本发明作进一步的描述。
实施例一
本实施例的应用场景为:
需要在识别出的平面上投射预设画面,外部物体与投射的画面有交互操作,且需要根据外部物体的身份进行投射画面的切换。所述外部物体可以是人、机器人或其他可活动的物体。
如在KTV或酒吧等嘈杂区域,只要伸出手掌,手掌平面被捕捉后,对应的投影装置可以在手掌上投射一个菜单,通过手指点击可以完成权限内的设备操作、下单、支付等等行为。还可以是在捕获到的桌子平面投射一个菜单,通过点击可以实现对灯光、空调、音响、大屏互动等的控制。
参见图1所示,本实施例一种动态平面投影方法,包括:
S10,接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;
S20,控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
需要说明的是,本实施方式的方法的执行主体为终端,所述终端可以为手机、平板电脑、掌上电脑PDA、笔记本或台式机等设备,当然,还可以为其他具有相似功能的设备,本实施方式不加以限制。
具体的,所述平面的可以根据一般意义上的定义进行理解,具体可以是额头、脸颊、手背、摊开的手心、背部、墙面、桌面、地面或其他物体表面等较为平整的一块面积,具体的大小及形状可以预先进行定义。
本实施例中,所述图像捕获装置可以包括多个多角度摄像机,当然也可以是其他图像捕获装置,只要能够满足本发明需求即可,本发明不做限制。所述投影装置可以包括一个或多个投影仪,当然也可以是其他图像捕获装置,只要能够满足本发明需求即可,本发明不做限制。作为一种优选,其中一个图像捕获装置设置在所述投影装置旁边,且所述图像捕获装置于所述投影装置的角度一致。所述旁边指图像捕获装置和摄影装置的距离不超过预设值,具体可根据实际进行设置。
本实施例中,在识别所述图像中的平面时,可以根据具体的应用场景对平面的持续时间进行判断,只有在平面存在超过预设时间时,才控制投影装置进行动作。如摊开手心的时间过短,则不进行画面投射。
参见图2所示,所述识别所述图像中的平面及平面的运动,具体包括:
S101,根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
S102,根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
S103,根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
参见图3所示,所述控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动,具体包括:
S201,根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
S202,根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
S203,获取图像中与在所述平面上投射的画面发生的互动行为,以及与所述投射的画面发生互动行的外部物体;所述互动行为包括点击、滑动、捏合、扩张、擦除、插入、拔出、击打、弹击等等;
S204,根据所述畸变计算结果、所述运动状态计算结果、所述互动行为和外部物体的身份计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
对所述外部物体进行身份识别,具体包括:
将各图像捕获装置捕捉到的外部物体,根据空间位置唯一性进行关联,得到所述外部物体的各个角度画面,从可识别角度进行身份识别。
如对于人体目标,则选取正向人脸进行身份识别。将各图像捕获装置的目标关联,使得某一图像捕获装置目标被遮挡,再露出后,由其它角度未被遮挡的图像捕获装置协助被遮挡图像捕获装置将新露出的目标和之前目标进行关联。具体的,各个图像捕获装置从不同角度拍摄到的目标,根据图像捕获装置安装位置,可以知道各自拍摄画面中的哪些物体是同一个目标,例如,a图像捕获装置画面中的第三个人与b图像捕获装置中的第六个人是同一个人。然后a拍到的可能是后脑勺,b拍到的是正面,所以b识别出目标身份,因此a虽然拍到的是后脑勺,但是a也能识别他画面中第三个人的身份。
进一步的,空间内可以设置多个投影装置,可以根据需要或设置选择合适投影装置输出画面。画面仅仅在对应动态平面的位置有亮度,其他区域为黑色(无亮度)。此外,可以同时投放多个画面,以同时覆盖多个平面。
参见图4所示,根据本发明的另一方面,一种动态平面投影系统,包括:
平面识别模块40,用于接收图像捕获装置60实时捕获的图像,识别所述图像中的平面及平面的运动;
动态投影模块50,用于控制投影装置70在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
所述平面识别模块40,具体包括:
实时平面捕捉单元401,用于根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
倾角计算单元402,用于根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
运动趋势判断单元403,用于根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
所述动态投影模块50,具体包括:
画面畸变计算单元501,用于根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
图像运动计算单元502,用于根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
互动动作捕捉单元503,用于获取图像中与在所述平面上投射的画面发生的互动行为,以及与所述投射的画面发生互动行的外部物体;
身份识别单元504,用于识别所述外部物体的身份;
图形内容计算单元505,用于根据所述畸变计算结果、所述运动状态计算结果、所述互动行为和外部物体的身份获取投射画面的变化,控制投影装置在所述平面上投射变化的画面。
所述身份识别单元,具体包括:
将各图像捕获装置捕捉到的外部物体,根据空间位置唯一性进行关联,得到所述外部物体的各个角度画面,从可识别角度进行身份识别。
实施例二
本实施例的应用场景为:
需要在识别出的平面上投射预设画面,外部物体与投射的画面有交互操作,但再进行投射切换时不需要判断外部物体的身份。所述外部物体可以是人、机器人或其他可活动的物体。
如在进行密室活动时,需要进行求助时,可以伸出手掌,即可弹出相应的线路图、求助方式等。在KTV或酒吧时,可以是在捕获到的桌子平面投射一个菜单,外部物体可以点击完成服务呼叫等。
参见图1所示,本实施例一种动态平面投影方法,包括:
S10,接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;
S20,控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
需要说明的是,本实施方式的方法的执行主体为终端,所述终端可以为手机、平板电脑、掌上电脑PDA、笔记本或台式机等设备,当然,还可以为其他具有相似功能的设备,本实施方式不加以限制。
具体的,所述平面的可以根据一般意义上的定义进行理解,具体可以是额头、脸颊、手背、摊开的手心、背部、墙面、桌面、地面或其他物体表面等较为平整的一块面积,具体的大小及形状可以预先进行定义。
本实施例中,所述图像捕获装置可以包括多个多角度摄像机,当然也可以是其他图像捕获装置,只要能够满足本发明需求即可,本发明不做限制。所述投影装置可以包括一个或多个投影仪,当然也可以是其他图像捕获装置,只要能够满足本发明需求即可,本发明不做限制。作为一种优选,其中一个图像捕获装置设置在所述投影装置旁边,且所述图像捕获装置于所述投影装置的角度一致。所述旁边指图像捕获装置和摄影装置的距离不超过预设值,具体可根据实际进行设置。
本实施例中,在识别所述图像中的平面时,可以根据具体的应用场景对平面的持续时间进行判断,只有在平面存在超过预设时间时,才控制投影装置进行动作。如摊开手心的时间过短,则不进行画面投射。
参见图2所示,所述识别所述图像中的平面及平面的运动,具体包括:
S101,根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
S102,根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
S103,根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
参见图5所示,所述控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动,具体包括:
S201,根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
S202,根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
S203,获取图像中与在所述平面上投射的画面发生的互动行为;所述互动行为包括点击、滑动、捏合、扩张、擦除、插入、拔出、击打、弹击等等;
S204,根据所述畸变计算结果、所述运动状态计算结果和所述互动行为的变化,控制投影装置在所述平面上投射变化的画面。
进一步的,空间内可以设置多个投影装置,可以根据需要或设置选择合适投影装置输出画面。画面仅仅在对应动态平面的位置有亮度,其他区域为黑色(无亮度)。此外,可以同时投放多个画面,以同时覆盖多个平面。
参见图6所示,根据本发明的另一方面,一种动态平面投影系统,包括:
平面识别模块40,用于接收图像捕获装置60实时捕获的图像,识别所述图像中的平面及平面的运动;
动态投影模块50,用于控制投影装置70在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
所述平面识别模块40,具体包括:
实时平面捕捉单元401,用于根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
倾角计算单元402,用于根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
运动趋势判断单元403,用于根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
所述动态投影模块50,具体包括:
画面畸变计算单元501,用于根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
图像运动计算单元502,用于根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
互动动作捕捉单元503,用于获取图像中与在所述平面上投射的画面发生的互动行为;
图形内容计算单元504,用于根据所述畸变计算结果、所述运动状态计算结果和所述互动行为获取投射画面的变化,控制投影装置在所述平面上投射变化的画面。
实施例三
本实施例的应用场景为:
需要在识别出的平面上投射预设画面,所述预设画面能够随着所述平面的移动而移动,外部物体与投射的画面无交互操作。
如根据预设,在人身体部位上如背部或胸部投射动态画面,画面跟随用户运动而运动,呈现会动的纹身的效果。
参见图1所示,本实施例一种动态平面投影方法,包括:
S10,接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;
S20,控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
需要说明的是,本实施方式的方法的执行主体为终端,所述终端可以为手机、平板电脑、掌上电脑PDA、笔记本或台式机等设备,当然,还可以为其他具有相似功能的设备,本实施方式不加以限制。
具体的,所述平面的可以根据一般意义上的定义进行理解,具体可以是额头、脸颊、手背、摊开的手心、背部、墙面、桌面、地面或其他物体表面等较为平整的一块面积,具体的大小及形状可以预先进行定义。
本实施例中,所述图像捕获装置可以包括多个多角度摄像机,当然也可以是其他图像捕获装置,只要能够满足本发明需求即可,本发明不做限制。所述投影装置可以包括一个或多个投影仪,当然也可以是其他图像捕获装置,只要能够满足本发明需求即可,本发明不做限制。作为一种优选,其中一个图像捕获装置设置在所述投影装置旁边,且所述图像捕获装置于所述投影装置的角度一致。所述旁边指图像捕获装置和摄影装置的距离不超过预设值,具体可根据实际进行设置。
本实施例中,在识别所述图像中的平面时,可以根据具体的应用场景对平面的持续时间进行判断,只有在平面存在超过预设时间时,才控制投影装置进行动作。如摊开手心的时间过短,则不进行画面投射。
参见图2所示,所述识别所述图像中的平面及平面的运动,具体包括:
S101,根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
S102,根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
S103,根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
参见图7所示,所述控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动,具体包括:
S201,根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
S202,根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
S203,根据所述畸变计算结果和所述运动状态计算结果,控制投影装置在所述平面上投射变化的画面。
需要说明的是,在本实施例中,如果平面为人体上的平面,可以对人进行身份识别,根据所述畸变计算结果、所述运动状态计算结果和人的身份,控制投影装置在所述平面上投射变化的画面。也可以不对人进行身份进行识别,仅根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失。
进一步的,空间内可以设置多个投影装置,可以根据需要或设置选择合适投影装置输出画面。画面仅仅在对应动态平面的位置有亮度,其他区域为黑色(无亮度)。此外,可以同时投放多个画面,以同时覆盖多个平面。
参见图8所示,根据本发明的另一方面,一种动态平面投影系统,包括:
平面识别模块40,用于接收图像捕获装置60实时捕获的图像,识别所述图像中的平面及平面的运动;
动态投影模块50,用于控制投影装置70在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
所述平面识别模块40,具体包括:
实时平面捕捉单元401,用于根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
倾角计算单元402,用于根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
运动趋势判断单元403,用于根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
所述动态投影模块50,具体包括:
画面畸变计算单元501,用于根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
图像运动计算单元502,用于根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
图形内容计算单元503,用于根据所述畸变计算结果和所述运动状态计算结果获取投射画面的变化,控制投影装置在所述平面上投射变化的画面。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (14)
1.一种动态平面投影方法,其特征在于,包括:
接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;
控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
2.根据权利要求1所述的动态平面投影方法,其特征在于,所述识别所述图像中的平面及平面的运动,具体包括:
根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
3.根据权利要求2所述的动态平面投影方法,其特征在于,所述控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动,具体包括:
根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
根据所述畸变计算结果和运动状态计算结果获取待投射的画面,控制投影装置在所述平面上投射对应的画面。
4.根据权利要求1所述的动态平面投影方法,其特征在于,所述投影方法还包括:
获取图像中与在所述平面上投射的画面发生的互动行为;
根据所述互动行为计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
5.根据权利要求4所述的动态平面投影方法,其特征在于,所述投影方法还包括:
获取图像中与在所述平面上投射的画面发生的互动行为,以及与所述投射的画面发生互动行的外部物体;
根据所述互动行为和外部物体的身份计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
6.根据权利要求5所述的动态平面投影方法,其特征在于,对所述外部物体进行身份识别,具体包括:
将各图像捕获装置捕捉到的外部物体,根据空间位置唯一性进行关联,得到所述外部物体的各个角度画面,从可识别角度进行身份识别。
7.一种动态平面投影系统,其特征在于,包括:
平面识别模块,用于接收图像捕获装置实时捕获的图像,识别所述图像中的平面及平面的运动;
动态投影模块,用于控制投影装置在所述平面上投射与平面尺寸大小相匹配的预设画面;且所述预设画面能够随着所述平面的移动而移动。
8.根据权利要求7所述的动态平面投影系统,其特征在于,所述平面识别模块,具体包括:
实时平面捕捉单元,用于根据实时捕获的图像,获取图像中平面的大小及平面在图像捕获装置中的相对位置;
倾角计算单元,用于根据所述图像捕获装置的安装角度和位置,计算所述平面和投影装置的位置及倾角关系;
运动趋势判断单元,用于根据每单位时间捕获的所述平面大小和相对位置构成的序列,判断所述平面的运动和变化趋势。
9.根据权利要求8所述的动态平面投影系统,其特征在于,所述动态投影模块,具体包括:
画面畸变计算单元,用于根据所述平面和投影装置的位置及倾角关系,对准备投射的画面进行畸变计算,使得投影装置将预设画面投放到所述平面时,呈现的是正面投影,且所述画面适合该平面大小;
图像运动计算单元,用于根据所述平面的运动和变化趋势,计算即将投射的画面的运动状态,使画面跟随所述平面移动而移动直至所述平面消失;
图形内容计算单元,用于根据所述畸变计算结果和运动状态计算结果获取待投射的画面,控制投影装置在所述平面上投射对应的画面。
10.根据权利要求7所述的动态平面投影系统,其特征在于,所述投影系统还包括:
互动动作捕捉单元,用于获取图像中与在所述平面上投射的画面发生的互动行为;
所述图形内容计算单元还用于根据所述互动行为计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
11.根据权利要求7所述的动态平面投影系统,其特征在于,所述投影系统还包括:
互动动作捕捉单元,用于获取图像中与在所述平面上投射的画面发生的互动行为,以及与所述投射的画面发生互动行的外部物体;
身份识别单元,用于识别所述外部物体的身份;
所述图形内容计算单元还用于根据所述互动行为和外部物体的身份计算投射画面的变化,控制投影装置在所述平面上投射变化的画面。
12.根据权利要求11所述的动态平面投影系统,其特征在于,所述身份识别单元,具体包括:
将各图像捕获装置捕捉到的外部物体,根据空间位置唯一性进行关联,得到所述外部物体的各个角度画面,从可识别角度进行身份识别。
13.根据权利要求7所述的动态平面投影系统,其特征在于,所述图像捕获装置包括两个及以上;且至少一个所述图像捕获装置设置在所述投影装置旁边,且所述图像捕获装置于所述投影装置的角度一致。
14.根据权利要求7所述的动态平面投影系统,其特征在于,所述投影装置包括一个或多个。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911220075.XA CN111093066A (zh) | 2019-12-03 | 2019-12-03 | 一种动态平面投影方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911220075.XA CN111093066A (zh) | 2019-12-03 | 2019-12-03 | 一种动态平面投影方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111093066A true CN111093066A (zh) | 2020-05-01 |
Family
ID=70393212
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911220075.XA Pending CN111093066A (zh) | 2019-12-03 | 2019-12-03 | 一种动态平面投影方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111093066A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112714299A (zh) * | 2021-03-26 | 2021-04-27 | 深圳市火乐科技发展有限公司 | 一种图像展示方法及装置 |
Citations (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008040557A (ja) * | 2006-08-01 | 2008-02-21 | Ricoh Co Ltd | 画像表示装置、画像表示方法及び画像表示プログラム |
JP2009295031A (ja) * | 2008-06-06 | 2009-12-17 | Canon Inc | 画像投影装置及びその制御方法 |
JP2010003264A (ja) * | 2008-06-23 | 2010-01-07 | Nippon Telegr & Teleph Corp <Ntt> | 情報提示制御装置及び情報提示制御方法 |
US20100199232A1 (en) * | 2009-02-03 | 2010-08-05 | Massachusetts Institute Of Technology | Wearable Gestural Interface |
CN102023796A (zh) * | 2009-09-11 | 2011-04-20 | 鸿富锦精密工业(深圳)有限公司 | 虚拟键盘的显示系统及其实现方法 |
US20110138285A1 (en) * | 2009-12-09 | 2011-06-09 | Industrial Technology Research Institute | Portable virtual human-machine interaction device and operation method thereof |
CN102306065A (zh) * | 2011-07-20 | 2012-01-04 | 无锡蜂巢创意科技有限公司 | 交互式光感触摸微型投影系统的实现方法 |
US20140177909A1 (en) * | 2012-12-24 | 2014-06-26 | Industrial Technology Research Institute | Three-dimensional interactive device and operation method thereof |
US20140347295A1 (en) * | 2013-05-22 | 2014-11-27 | Lg Electronics Inc. | Mobile terminal and control method thereof |
CN104243882A (zh) * | 2014-09-09 | 2014-12-24 | 联想(北京)有限公司 | 一种投影方法及穿戴式电子设备 |
CN104583921A (zh) * | 2012-08-27 | 2015-04-29 | 西铁城控股株式会社 | 信息输入装置 |
US20160261835A1 (en) * | 2014-04-01 | 2016-09-08 | Sony Corporation | Harmonizing a projected user interface |
CN106127858A (zh) * | 2016-06-24 | 2016-11-16 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
US20160349926A1 (en) * | 2014-01-10 | 2016-12-01 | Nec Corporation | Interface device, portable device, control device and module |
US20160366396A1 (en) * | 2015-06-15 | 2016-12-15 | Electronics And Telecommunications Research Institute | Interactive content control apparatus and method |
CN106385508A (zh) * | 2016-09-23 | 2017-02-08 | 维沃移动通信有限公司 | 一种信息显示方法及移动终端 |
CN106488629A (zh) * | 2015-09-02 | 2017-03-08 | 泉州市金太阳照明科技有限公司 | 一种投影控制型智能灯系统 |
CN106610781A (zh) * | 2015-12-31 | 2017-05-03 | 北京数科技有限公司 | 一种智能穿戴设备 |
CN206431409U (zh) * | 2017-01-09 | 2017-08-22 | 河北博威集成电路有限公司 | 现场再现全息投影显示系统 |
CN107148757A (zh) * | 2014-09-05 | 2017-09-08 | 三星电子株式会社 | 便携式终端和控制其的方法 |
CN107197223A (zh) * | 2017-06-15 | 2017-09-22 | 北京有初科技有限公司 | 微型投影设备和投影设备的手势控制方法 |
JP6210466B1 (ja) * | 2016-10-31 | 2017-10-11 | パナソニックIpマネジメント株式会社 | 情報入力装置 |
CN207067955U (zh) * | 2017-06-05 | 2018-03-02 | 珠海格力电器股份有限公司 | 用于投影触控式设备的投影控制装置及设备 |
CN108063928A (zh) * | 2017-11-16 | 2018-05-22 | 北京奇艺世纪科技有限公司 | 一种投影仪的成像图像自动调整方法、装置及电子设备 |
CN108269288A (zh) * | 2017-12-28 | 2018-07-10 | 中国科学院自动化研究所 | 智能异形投影非接触式交互系统和方法 |
CN108289208A (zh) * | 2018-01-24 | 2018-07-17 | 歌尔股份有限公司 | 一种投影画面自动校正方法和装置 |
CN108826617A (zh) * | 2018-07-04 | 2018-11-16 | 深圳创维空调科技有限公司 | 一种具有镭射投影功能的空调控制器及空调 |
US20190196591A1 (en) * | 2017-12-22 | 2019-06-27 | Ultrahaptics Ip Ltd | Human Interactions with Mid-Air Haptic Systems |
US20190302965A1 (en) * | 2018-03-27 | 2019-10-03 | Seiko Epson Corporation | Detection device and method for controlling detection device |
CN110442271A (zh) * | 2018-05-02 | 2019-11-12 | 李爱华 | 一种虚拟触控方法 |
-
2019
- 2019-12-03 CN CN201911220075.XA patent/CN111093066A/zh active Pending
Patent Citations (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008040557A (ja) * | 2006-08-01 | 2008-02-21 | Ricoh Co Ltd | 画像表示装置、画像表示方法及び画像表示プログラム |
JP2009295031A (ja) * | 2008-06-06 | 2009-12-17 | Canon Inc | 画像投影装置及びその制御方法 |
JP2010003264A (ja) * | 2008-06-23 | 2010-01-07 | Nippon Telegr & Teleph Corp <Ntt> | 情報提示制御装置及び情報提示制御方法 |
US20100199232A1 (en) * | 2009-02-03 | 2010-08-05 | Massachusetts Institute Of Technology | Wearable Gestural Interface |
CN102023796A (zh) * | 2009-09-11 | 2011-04-20 | 鸿富锦精密工业(深圳)有限公司 | 虚拟键盘的显示系统及其实现方法 |
US20110138285A1 (en) * | 2009-12-09 | 2011-06-09 | Industrial Technology Research Institute | Portable virtual human-machine interaction device and operation method thereof |
CN102306065A (zh) * | 2011-07-20 | 2012-01-04 | 无锡蜂巢创意科技有限公司 | 交互式光感触摸微型投影系统的实现方法 |
CN104583921A (zh) * | 2012-08-27 | 2015-04-29 | 西铁城控股株式会社 | 信息输入装置 |
US20140177909A1 (en) * | 2012-12-24 | 2014-06-26 | Industrial Technology Research Institute | Three-dimensional interactive device and operation method thereof |
US20140347295A1 (en) * | 2013-05-22 | 2014-11-27 | Lg Electronics Inc. | Mobile terminal and control method thereof |
US20160349926A1 (en) * | 2014-01-10 | 2016-12-01 | Nec Corporation | Interface device, portable device, control device and module |
US20160261835A1 (en) * | 2014-04-01 | 2016-09-08 | Sony Corporation | Harmonizing a projected user interface |
CN107148757A (zh) * | 2014-09-05 | 2017-09-08 | 三星电子株式会社 | 便携式终端和控制其的方法 |
CN104243882A (zh) * | 2014-09-09 | 2014-12-24 | 联想(北京)有限公司 | 一种投影方法及穿戴式电子设备 |
US20160366396A1 (en) * | 2015-06-15 | 2016-12-15 | Electronics And Telecommunications Research Institute | Interactive content control apparatus and method |
CN106488629A (zh) * | 2015-09-02 | 2017-03-08 | 泉州市金太阳照明科技有限公司 | 一种投影控制型智能灯系统 |
CN106610781A (zh) * | 2015-12-31 | 2017-05-03 | 北京数科技有限公司 | 一种智能穿戴设备 |
CN106127858A (zh) * | 2016-06-24 | 2016-11-16 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN106385508A (zh) * | 2016-09-23 | 2017-02-08 | 维沃移动通信有限公司 | 一种信息显示方法及移动终端 |
JP6210466B1 (ja) * | 2016-10-31 | 2017-10-11 | パナソニックIpマネジメント株式会社 | 情報入力装置 |
CN206431409U (zh) * | 2017-01-09 | 2017-08-22 | 河北博威集成电路有限公司 | 现场再现全息投影显示系统 |
CN207067955U (zh) * | 2017-06-05 | 2018-03-02 | 珠海格力电器股份有限公司 | 用于投影触控式设备的投影控制装置及设备 |
CN107197223A (zh) * | 2017-06-15 | 2017-09-22 | 北京有初科技有限公司 | 微型投影设备和投影设备的手势控制方法 |
CN108063928A (zh) * | 2017-11-16 | 2018-05-22 | 北京奇艺世纪科技有限公司 | 一种投影仪的成像图像自动调整方法、装置及电子设备 |
US20190196591A1 (en) * | 2017-12-22 | 2019-06-27 | Ultrahaptics Ip Ltd | Human Interactions with Mid-Air Haptic Systems |
CN108269288A (zh) * | 2017-12-28 | 2018-07-10 | 中国科学院自动化研究所 | 智能异形投影非接触式交互系统和方法 |
CN108289208A (zh) * | 2018-01-24 | 2018-07-17 | 歌尔股份有限公司 | 一种投影画面自动校正方法和装置 |
US20190302965A1 (en) * | 2018-03-27 | 2019-10-03 | Seiko Epson Corporation | Detection device and method for controlling detection device |
CN110442271A (zh) * | 2018-05-02 | 2019-11-12 | 李爱华 | 一种虚拟触控方法 |
CN108826617A (zh) * | 2018-07-04 | 2018-11-16 | 深圳创维空调科技有限公司 | 一种具有镭射投影功能的空调控制器及空调 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112714299A (zh) * | 2021-03-26 | 2021-04-27 | 深圳市火乐科技发展有限公司 | 一种图像展示方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113365041B (zh) | 投影校正方法、装置、存储介质和电子设备 | |
KR101457777B1 (ko) | 컴퓨팅 디바이스 인터페이스 | |
US20150146078A1 (en) | Shift camera focus based on speaker position | |
JP2001128057A (ja) | カメラ制御用ユーザインタフェースシステム | |
US10681308B2 (en) | Electronic apparatus and method for controlling thereof | |
WO2021097600A1 (zh) | 一种隔空交互方法、装置和设备 | |
US20150331491A1 (en) | System and method for gesture based touchscreen control of displays | |
US20150172634A1 (en) | Dynamic POV Composite 3D Video System | |
CN104427252A (zh) | 用于合成图像的方法及其电子设备 | |
TW201135341A (en) | Front projection system and method | |
CN102196176A (zh) | 信息处理设备、信息处理方法和程序 | |
KR20130020337A (ko) | 사용자 인터랙션 장치 및 방법 | |
JP2009223490A (ja) | 仮想スイッチならびにそれを用いた家電制御システムおよび家電制御方法 | |
WO2020090227A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN113329172B (zh) | 拍摄方法、装置及电子设备 | |
JP2012238293A (ja) | 入力装置 | |
CN105991968A (zh) | 显示设备伪装/恢复系统和控制方法 | |
CN111093066A (zh) | 一种动态平面投影方法及系统 | |
TW578031B (en) | Projection system with an image capturing device | |
CN111176425A (zh) | 多屏幕操作方法与使用此方法的电子系统 | |
WO2023174009A1 (zh) | 基于虚拟现实的拍摄处理方法、装置及电子设备 | |
CN111064946A (zh) | 基于室内场景的视频融合方法、系统、装置和存储介质 | |
JP2019153205A (ja) | 投影システムとその制御方法及びプログラム | |
CN108174171A (zh) | 一种带音箱的投影仪 | |
KR101998786B1 (ko) | 가상공간을 위한 비접촉식 손가락 입력 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200501 |
|
RJ01 | Rejection of invention patent application after publication |