CN110365959A - 投影方法、装置、系统及投影设备 - Google Patents

投影方法、装置、系统及投影设备 Download PDF

Info

Publication number
CN110365959A
CN110365959A CN201910718759.6A CN201910718759A CN110365959A CN 110365959 A CN110365959 A CN 110365959A CN 201910718759 A CN201910718759 A CN 201910718759A CN 110365959 A CN110365959 A CN 110365959A
Authority
CN
China
Prior art keywords
real scene
scene image
image
projection
projected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910718759.6A
Other languages
English (en)
Inventor
薄涛
于会明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201910718759.6A priority Critical patent/CN110365959A/zh
Publication of CN110365959A publication Critical patent/CN110365959A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/48Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/54Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/54Accessories
    • G03B21/56Projection screens
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/02Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3147Multi-projection systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Theoretical Computer Science (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请公开了投影方法、装置、系统及投影设备,该方法包括接收图像组,图像组包括第一实景图像与至少一个第二实景图像,第一实景图像包含第一目标对象,第二实景图像至少包括第二目标对象;将第一实景图像和第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,投影空间用于无缝地呈现第一实景图像和第二实景图像。本申请实施例通过在投影空间内无缝的呈现教师相关的第一实景图像和学生相关的第二实景图像,从而构成逼真的多学生参与的虚拟场景,实现了线上与线下教学的融合,使得每个线上受教的学生能够实时体验线下教学的交流场景,提高了用户的体验度。

Description

投影方法、装置、系统及投影设备
技术领域
本申请一般涉及图像处理技术领域,尤其涉及投影方法、装置、系统及投影设备。
背景技术
随着互联网技术的发展,教育培训逐渐从传统的线下教学转换为线上教学,克服了线下教学对于空间及时间的限制。线上教育以其空间成本低及时间掌控灵活等优势,逐渐在教育培训领域占据较大市场份额。
对于目前的线上教学,通常采用点对点视频连线的在线教育,使得听课者被动地听课,无法享受线下教学的真实互动性,影响用户对教学培训的体验度。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种投影方法、装置、系统及投影设备,来解决线上教育与线下教育的真实互动问题。
第一方面,本申请实施例提供了一种投影方法,该方法包括:
接收图像组,该图像组包括第一实景图像与至少一个第二实景图像,该第一实景图像包含第一目标对象,该第二实景图像至少包括第二目标对象;
将该第一实景图像和该第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,该投影空间用于无缝地呈现该第一实景图像和该第二实景图像。
第二方面,本申请实施例提供了一种投影方法,该方法包括。
接收控制请求,及第一目标的第一实景图像,及至少一个第二目标的第二实景图像,及至少一个该第二目标与其所在的投影空间的投影幕布上的投影图像的位置关系图像;
响应于该控制请求,基于该位置关系图像,对第一实景图像及至少一个第二实景图像进行合成,得到图像组;
向分路投影设备发送该图像组,使得该分路投影设备将该第一实景图像和该第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,该投影空间用于无缝地呈现该第一实景图像和该第二实景图像。
第三方面,本申请实施例提供了一种投影系统,该系统包括:
投影帐篷,包括多个投影幕布,多个该投影幕布围成投影空间;
设置在该投影帐篷内的分路投影设备,用于接收图像组中的第一实景图像和第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,该投影空间用于无缝地呈现该第一实景图像和该第二实景图像,该第一实景图像包含第一目标对象,该第二实景图像至少包括第二目标对象;
设置在该投影帐篷内的第一摄像头及至少一个第二摄像头,该第一摄像头采集该第二实景图像,该第二摄像头采集该第二目标与其所在的投影空间内投影幕布上的投影图像的位置关系图像,并向服务器发送该第二实景图像及该位置关系图像。
第四方面,本申请实施例提供了一种投影装置,该装置包括:
接收模块,用于接收图像组,该图像组包括第一实景图像与至少一个第二实景图像,该第一实景图像包含第一目标对象,该第二实景图像至少包括第二目标对象;
投影模块,用于将该第一实景图像和该第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,该投影空间用于无缝地呈现该第一实景图像和该第二实景图像。
第五方面,本申请实施例提供了一种投影装置,该装置包括:
接收模块,用于接收控制请求,及第一目标的第一实景图像,及至少一个第二目标的第二实景图像,及至少一个该第二目标与其所在的投影空间的投影幕布上的投影图像的位置关系图像;
合成模块,用于响应于该控制请求,基于该位置关系图像,对第一实景图像及至少一个第二实景图像进行合成,得到图像组;
发送模块,用于向分路投影设备发送该图像组,使得该分路投影设备将该第一实景图像和该第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,该投影空间用于无缝地呈现该第一实景图像和该第二实景图像。
第六方面,本申请实施例提供了一种分路投影设备,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,该处理器执行该程序时实现如上述第一方面所述的方法。
本申请实施例提供的投影方法、装置、系统及投影设备,通过接收由作为授课者的第一目标的实景图像以及作为同学的第二目标的实景图像合成的图像组,并根据预先设置的位置关系,将第一实景图像和第二实景图像分别投影在某个第二目标所在的投影空间内对应的投影幕布上,使得在投影空间内无缝的呈现第一实景图像和第二实景图像,从而构成逼真的多学生参与的线下虚拟教学场景,实现了线上与线下教学的融合,使得每个线上受教的学生能够实时体验线下教学的交流体验,提高了用户的体验度。
进一步,通过识别第一实景图像及第二实景图像的标识,按照标识对应的位置投影第一实景图像与第二实景图像,实现投影空间内投影图像的无缝衔接。
进一步,通过服务器与学生用户的第一移动终端的交互,实现了分路投影设备的智能控制。
进一步地,通过将投影空间内的用户两侧的投影幕布设置成弧形结构,使得构成的线下教学场景更加逼真阶梯式教学场景,提升用户体验度。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1示出了本申请实施例提供的应用系统的示意性框图;
图2为本申请实施例的应用场景示意性框图;
图3为本申请实施例的投影系统的结构示意图;
图4为本申请实施例提供的投影方法的流程示意图;
图5为本申请又一实施例提供的投影方法的流程示意图;
图6为本申请又一实施例提供的投影方法的流程示意图;
图7为本申请实施例提供的投影装置的结构示意图;
图8为本申请又一实施例提供的投影装置的结构示意图;
图9为本申请实施例的分路投影设备的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关公开,而非对该公开的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与公开相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
本申请实施例为了解决线上教学的局限性,实现线上与线下教学的融合,使得每个线上学生能够实时体验线下教学的交流场景,以提高沉浸式体验,提供了一种应用系统,该应用系统可以应用于如图1所示的教学场景。如图1所示,该教学场景下的应用系统100可以包括网络101,服务器102,分路投影设备103以及摄像装置104。
其中,网络102例如可以是局域网、广域网、因特网、移动通信网络、无线局域网络或其组合;分路投影设备可以为包括处理器、输出单元及无线传输单元的硬件设备;摄像装置可以包括多个摄像头,每个摄像头可以内置无线传输单元,以将采集到的图像数据发送到如服务器等处理机构,使得服务器对采集到的图像进行合成及抠像处理,得到待显示的图像,并发送给终端设备,如分路投影设备,使得分路投影设备对接收到的图像进行投影,以显示在其所处的投影空间中的投影幕布上。
进一步的,该应用系统还可以包括第一移动终端105及第二移动终端106,如手机或电脑等终端设备。该第二移动终端为教师所持的移动终端,该第一移动终端可以为用户的手持终端。他们通过网络与服务器连接,实现与服务器的数据交互。
例如,可以在第一移动终端及第二移动终端上加载应用程序,来展现操作界面,使得教师及用户输入请求,或者显示服务器推送的通知消息。
图2所示为本申请实施例的应用场景示意性框图,上述的应用系统应用在该场景下,如线上的教育培训或幼儿早教等。该场景中包括上述的应用系统、包括多个投影幕布的投影帐篷201、授课者(第一目标)的投影图像202、处于每个投影空间内的当前用户203及在投影幕布上投影的其他学生(第二目标)的投影图像204。
可以理解,本申请实施例提供的用于上述教学场景中的投影系统,摄像装置采集包括教师的第一实景图像及每个包括学生的第二实景图像发送给服务器后,服务器可以基于教师或学生发送的控制请求,将实景图像进行拼接,得到图像组,然后发送给分路投影设备,分路投影设备在接收到服务器发送的图像组后,将第一实景图像和第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布上,使得在投影空间内无缝地呈现图像组,从而构成多学生参与的多角度虚拟场景,实现了线上与线下教学的融合,使得每个线上受教的学生能够实时体验线下教学的交流场景,提高用户的沉浸式体验。
为了便于理解,图3为本申请实施例提供的投影系统的结构示意图。如图3所示,该投影系统包括:。
多个投影帐篷301,包括多个投影幕布,多个该投影幕布围成投影空间。
具体的,投影帐篷可以设置为密闭的投影室,或者可以为敞开的投影区域。
例如,当该教学场景发生在室外时,由于室外环境复杂,需要用密闭的帐篷结构隔离投影空间。即该投影帐篷可以为四周封闭的投影室,如利用板式结构或软体的纤维等材料构建而成的帐篷,并在帐篷内部的相邻的三面或两面墙体上设置有投影幕布,使得互相连接的投影幕布在帐篷内形成一个投影空间。即当作为学生的某用户处于帐篷内时,用户的正前方设置有一个壁面式的幕布,在左侧和/或右侧设置一个壁面式幕布。则在位于用户正前方的投影幕布及两侧投影幕布上分别投影一组图像,使得两组或三组图像能够无缝拼接,从而组合展示一个逼真的教学场景。
又例如,当该教学场景发生在室内时,则该投影帐篷可以仅仅包括两个或三个壁面式投影幕布。如用户位于客厅或书房等室内,则可以将其中一个投影幕布挂设在用户的正前方,其他两个挂设在用户的侧面,使得正前方的投影幕布与两侧的投影幕布彼此连接,形成投影空间,从而可以在位于用户正前方的投影幕布及两侧投影幕布上分别投影一组图像,使得两组或三组图像能够无缝拼接,展示一个逼真的教学场景。
进一步的,为了能够展示更加逼真的教学场景,将用户两侧的投影幕布设置为弧形结构,使得在两侧的投影幕布上的投影图像具有高低不同的布局,展现出逼真的弧形的阶梯状的教学场景。
设置在该投影空间内的分路投影设备302,用于将接收到的图像组投影在该投影空间内,使得第一实景图像及第二实景图像在投影帐篷中的当前用户周围无缝呈现,以展现真实的教学场景。例如,将第一目标实景图像投影在当前用户的正前方的投影布幕上,将第二实景图像分别投影在该当前用户的侧面的投影幕布上。
可以理解,本申请实施例中,为了更好的模拟真实的教学场景,可以使得用户处于投影帐篷的中间位置,相当于教室中的中间座位。位于用户正前方的投影幕布,在其上投影教师及教学内容的实景图像,即第一目标的实景图像,相当于黑板、讲台、教师及教学内容;位于用户两侧的投影幕布,在其上投影多个参与者的拼接图像,相当于位于用户两侧的同学。
具体的,该分路投影设备可以包括处理及多个投影镜头,如将多个投影仪与处理器集成为一个分路投影设备,即每个投影幕布可以对应设置一个投影仪,从而可以将接收到的不同图像,按照位置关系对应的投影在不同的投影幕布上。
可以理解,通过上述的分路投影设备及投影幕布之间的对应关系设置,使得处理器接收到服务器发送的图像组后,可以对应的将第一实景图像及第二实景图像分发到不同的投影仪。例如,在当前用户位于投影帐篷的中间位置时,可以将第一目标的实景图像分发给用户正前方对应的投影仪,将包括至少一个第二目标(同学)的实景图像分发给侧面投影幕布对应的投影仪,使得教师角色及同学角色的图像显示在用户的正前方及侧面的相应位置,形成逼真的教学场景。
可选的,该分路投影设备可以挂设在投影帐篷的顶部。
设置在该投影空间内的第一摄像头及至少一个第二摄像头303,该第一摄像头用于采集教师的实景图像,该第二摄像头303采集该第二目标的实景图像,该第三摄像头304采集该第二目标与其侧面的投影幕布上的投影图像的位置关系图像,并向服务器发送该实景图像及该位置关系图像。
具体的,该摄像装置可以包括多个摄像头,如设置在用户正前方的第二摄像头,该摄像头用于采集投影帐篷内当前用户的实景图像;设置在用户左上方和/或设置在用户右上方的第三摄像头,用于采集当前用户与其侧面的投影幕布上的同学的投影图像的位置关系图像,即该摄像头采集当前用户与参与者之间的位置关系,以为服务器提供多个参与者的图像合成位置关系依据,从多角度实现动态教学过程的逼真展示。
可以理解,在实际的教学过程中,可以包括多个投影帐篷,每个投影帐篷内有当前的使用用户及摄像头,即服务器可以接收到每个投影帐篷中的用户的实景图像,以及每个投影帐篷中用户与其两侧的相邻投影图像之间的位置关系图像。
可选的,用于采集教师的第一摄像头及投影帐篷中当前用户的实景图像的第二摄像头可以为当前用户的移动终端,如手机或电脑等设备。
优选的,可以在用户的左上方及右上方各设一个第三摄像头,即实现多角度采集并展现用户的环境,使得当前用户感知到处于教室中间的线下教学氛围。
进一步的,为了能够实现每组投影图像的无缝拼接,使得三组图像能够展示出逼真的教室场景,该第三摄像头还用于采集正前方的第一目标的投影图像与两侧的第二目标的拼接图像的投影图像之间的位置关系,从而可以使得服务器根据该位置关系调整发送到分路投影设备上的图像组。
为了更好的理解本申请实施例,下面通过图4至图6详细解释本申请中的投影过程,如图4所示为本申请实施例的投影方法的流程示意图,该方法可以由分路投影设备执行,该方法包括:
S410,接收包括第一实景图像及至少一个第二实景图像的图像组。
S420,将第一实景图像和第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布上。
具体的,本申请实施例中,分路投影设备可以接收服务器发送的图像组,该图像组可以包括第一实景图像及至少一个第二实景图像,该第一实景图像包含第一目标对象,如包括教师及教学内容等;第二实景图像包括至少第二目标对象,如包括每个学生及工位场景等。然后经过处理器处理,将第一实景图像及第二实景图像分别投影在对应的投影的幕布上,使得投影幕空间内的多组投影图像无缝拼接,共同组合成逼真的线下教学场景,实现线上与线下的融合。其中,该图像组可以通过服务器基于作为老师的第一目标输入的控制指令及第二目标与其侧面的投影图像的位置关系,由至少一个该第一实景图像及第二实景图像合成的。
可选的,在分路投影设备将第一实景图像及第二实景图像投影在对应的投影幕布上时,可以基于实景图像的标识与对应的位置关系来实现。
例如,第一实景图像的第一标识对应正前方位置,其中一个第二实景图像的第二标识对应右侧位置,另外一个第二实景图像的第二标识对应左侧位置,即第一标识对应正前方位置的投影仪标识,第二标识分别对应左右两侧的投影仪标识,从而可以将每个实景图像投影在相应的位置上,实现无缝衔接。
图5所示为本申请又一实施例的投影方法的流程示意图,该方法由服务器执行,该方法可以包括:
S510,接收控制请求、及第一目标的第一实景图像,及至少一个第二目标的第二实景图像,及至少一个第二目标与其所在的投影空间的投影幕布上的投影图像的位置关系图像。
S520,响应于该控制请求,基于位置关系图像,对第一实景图像及至少一个第二实景图像进行合成,得到图像组。
S530,向分路投影设备发送该图像组。
具体的,本申请实施例中,服务器在接收老师输入的控制请求、摄像头采集的每个投影帐篷中的真实用户的实景图像,以及用户与其所在的投影幕布上同学(第二目标)的投影图像之间的位置关系图像后,解析并响应该控制请求,生成控制指令,进而根据该控制指令,将当前的实景图像合成需要投影到其他投影帐篷中的图像组。其中,该控制请求可以为老师通过配置的第二移动终端输入的请求消息,如通过平板或电脑等终端设备,在其上可以运行有应用程序,用于在教学过程中,与参与的同学进行互动时,向服务器发送控制请求,使得服务器解析该控制请求,并响应于该控制请求,进行参与者的实景图像的合成。
例如,参与线上教学的有教师T、用户A、B、C、D、E及F。教学开始时,服务器可以利用每个用户的标识,如注册账号等信息,将所有的用户分配到不同的教室(投影帐篷),如每个教室具有自己的编号,使得每个用户拥有一个自己的教室,如用户A、B、C、D及E分别在1号、2号、3号、4号、5号及6号投影帐篷中。同时,服务器为每个用户配置相邻的同学,即将所有的用户进行分组。如为用户A配置左侧的同学B及C,右侧的同学E及D,其他的类似。可以理解,用户可以自主选择其同学,如可以利用自己的终端设备,通过登录账号,选择教室编号以及自己的左右两侧的同学。
在教学过程中,服务器可以实时接收到教师T的实景图像,包括教学内容等实景;实时接收到1号、2号、3号4、5号及6号投影帐篷中的用户A、B、C、D、E及F的实景图像。且实时接收到作为同学的每个用户的投影图像与投影帐篷中的真实用户之间的位置关系图像,如用户A与用户B、C、D及E的投影图像之间的位置关系图像。此时,当教师根据教学需要,发出控制请求时,如需要用户F及用户E进行示范,此时,该控制请求中可以携带用户F及用户E的标识。服务器在接收到该请求时,解析该控制请求,得到用户F及用户E的标识,并响应于该请求,基于接收到的当前的所有用户之间的位置关系,重新合成拼接图像,使得每个用户能够感受到用户F及E的动态变化。如对于用户A来说,将用户F及用户E重新设置为相邻用户,并基于用户A与用户F及用户E的投影图像的位置关系,拼接用户F及用户E的实景图像,展示其所要展示的动态变化,如前后错开的动态变化。
又例如,当在教学过程中,教师需要指示某同学进行课堂展示时,如需要用户B进行展示,此时,需要每个用户都能够观察到用户B的实景图像。因此,且假如上一时刻,用户D的左侧的用户为C及A的组合图像,右侧为用户E及F的组合图像。此时,需要根据采集到的用户D与其邻近的用户之间的位置关系,将其他用户的实景图像替换为用户B的实景图像。
可选的,如果某用户在示范,还可以将当前进行示范的用户作为第一目标,使得其实景图像投影在每个投影帐篷中的正前方,同时,其他的用户的位置关系随之改变即可。
最后,在得到第一目标的实景图像及作为同学的实景图像的图像组后,可以发送给分路投影设备,使得分路投影设备将第一实景图像和第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,投影空间用于无缝地呈现第一实景图像和第二实景图像。
例如,将用户B及用户C合成的拼接图像以及用户C及用户D合成的拼接图像发送给用户A的投影帐篷中的分路投影设备中,使得该分路投影设备将用户B及用户C合成的拼接图像投影在用户A左侧的投影幕布上,将用户C及用户D的拼接图像投影在用户A右侧的投影幕布上。
可以理解,通过上述实景图像合成,当有更多的用户时,则每张拼接图像中包含有多个用户的实景图像。进而可以通过分路投影设备,将包含多个用户实景图像的拼接图像投影在每个用户的两侧,从而可以形成类似线下教学的多个参与者的场景。
图6所示为本申请又一实施例的投影方法的流程示意图,该方法由服务器、分路投影设备及移动终端执行,该方法包括:
S601,服务器接收第一移动终端和/或第二移动终端发送的登录或注册请求。
具体的,服务器学生用户的第一移动终端和/或教师用户的第二移动终端首先可以向服务器注册,使得服务器存储每个用户的账号,即用户标识,如手机号码、身份证号或终端标识等。
S602,第一移动终端向服务器发送开启请求。
S603,服务器响应于该开启请求,生成开启指令。
S604,向分路投影设备发送该开启指令。
S605,分路投影设备接收该开启指令,并响应于该开启指令,打开分路投影设备。
S606,摄像装置采集实景图像及位置关系图像。
具体的,采集第一目标对象的实景图像,及至少一个第二目标对象的实景图像,及至少一个第二目标与其侧面的投影幕布上的投影图像的位置关系图像。
S607,第二终端向服务器发送控制请求;摄像装置向服务器发送实景图像及位置关系图像。
具体的,在教学过程中,教师根据教学场景需求,如用户A与用户B进行动态的交互,如站位等变化,向服务器发送控制请求,如通过语音等方式输入到第二终端,使得第二终端发送到服务器。该控制请求可以携带有用户A与用户B标识,还可以携带有位置变化信息的。
S608,服务器接收控制请求、实景图像及位置关系图像,并响应该控制请求,生成图像组。
具体的,服务器接收第二终端发送的控制请求,及第一目标对象的实景图像,及至少一个第一摄像头发送的第二目标对象的实景图像,及至少一个第二摄像头发送的所述第二目标对象与其侧面的投影幕布上的投影图像的位置关系图像;解析该控制请求,得到待执行教学动作的第二目标对象的标识,还可以得到位置变化信息。如用户A与用户B标识,以及用户A及用户B的位置变化信息。然后响应于该控制请求,基于第二目标对象的标识、位置变化信息及所述第二目标对象与其侧面的投影图像的位置关系图像,对至少一个实景图像进行合成,得到图像组。
S609,向分路投影设备发送图像组。
S610,分路投影设备接收并投影服务器发送的图像组。
具体的,接收包括第一实景图像及第二实景图像的图像组后,识别第一实景图像的第一标识和第二实景图像的第二标识,按照第一标识和第二标识对应的位置投影第一实景图像与第二实景图像,使得在投影空间内无缝地呈现第一实景图像和第二实景图像。
S611,第一终端向服务器发送关闭请求。
S612,服务器响应该关闭请求,生成关闭指令。
S613,服务器向分路投影设备发送该关闭指令。
S614,分路投影设备接收该关闭指令,并相响应于该关闭指令,关闭分路投影设备。
本申请实施例中,为了更好的控制分路投影设备,可以提供客户端及服务器的运行模式,在该服务器中运行有管理程序,用于管理每个用户的账号及费用等数据;在用户的移动终端,如手机等设备上安装应用程序的客户端。则在用户安装了客户端后,教师用户或学生用户首先可以向服务器注册申请账号,成为该应用程序的用户。进而可以通过该客户端与服务器,进行信息交互,如在教学开始时,向服务器发送控制分路投影设备的数据请求,如开启请求或数据请求,使得服务器响应该请求,向分路投影设备发送开启或关闭指令,以完成分路投影设备的远程控制。在教学过程中,教师的第二移动终端可以向服务器发送控制请求,使得服务器响应该控制请求,并根据当前每个用户及投影图像的位置关系,实时合成与该控制请求对应的拼接图像,使得每个用户能够体验到线下教学的动态场景。
可选的,服务器还可以向移动终端推送课程设置信息、缴费信息及其他服务信息。
可选的,投影系统中,还可以利用遥控器等设备控制分路投影设备。
本申请实施例中,教师用户及学生用户利用客户端完成注册登录,教师用户进一步通过客户端向服务器发送控制请求,使得服务器响应该控制请求,对摄像头采集并发送的实景图像进行合成,并将合成后的组合图像发送给分路投影设备,分路投影设备将实景图像投影到对应的投影幕布上,使得教师的实景图像及用户相邻的同学的拼接图像无缝呈现在投影空间内,实时的展示了教学过程中老师与同学之间以及同学与同学之间的互动,实现了线下教学与线上教学的融合,提高了用户体验。
图7所示为本申请实施例的投影装置的结构示意图,该装置700包括:
接收模块710,用于接收图像组,该图像组包括第一实景图像与至少一个第二实景图像,该第一实景图像包含第一目标对象,该第二实景图像至少包括第二目标对象;
投影模块720,用于将该第一实景图像和该第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,该投影空间用于无缝地呈现该第一实景图像和该第二实景图像。
该接收模块还用于接收服务器发送的开启或关闭指令,该开启或关闭指令是服务器响应于第一移动终端发送的开启或关闭请求生成的,该第一移动终端为该第二副目标所持。
图8所示为本申请又一实施例的投影装置的结构示意图,
接收模块810,用于接收控制请求,及第一目标的第一实景图像,及至少一个第二目标的第二实景图像,及至少一个该第二目标与其所在的投影空间的投影幕布上的投影图像的位置关系图像;
合成模块820,用于响应于该控制请求,基于该位置关系图像,对第一实景图像及至少一个第二实景图像进行合成,得到图像组;
发送模块830,用于向分路投影设备发送该图像组,使得该分路投影设备将该第一实景图像和该第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,该投影空间用于无缝地呈现该第一实景图像和该第二实景图像。
该合成模块具体用于解析该控制请求,得到至少一个的第二目标对象的标识;
识别该第一实景图像的第一标识及该第二实景图像的第二标识;
基于该位置关系图像、该第二目标对象的标识、该第一标识及该第二标识,对该第一实景图像及至少一个该第二实景图像进行合成,生成该图像组。
该接收模块还用于接收第一移动终端和/或第二移动终端发送的登录或注册请求,该登录或注册请求是该第一移动终端或该第二移动终端响应于该第二目标或该第一目标输入的登录消息或注册消息生成的。
应当理解,上述装置中记载的诸单元或模块与参考图5-7描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作和特征同样适用于上述装置及其中包含的单元,在此不再赘述。上述装置可以预先实现在电子设备的浏览器或其他安全应用中,也可以通过下载等方式而加载到电子设备的浏览器或其安全应用中。上述装置中的相应单元可以与电子设备中的单元相互配合以实现本申请实施例的方案。
在上文详细描述中提及的若干模块或者单元,这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
下面参考图9,图9为本申请实施例的分路投影设备的计算机系统900的结构示意图。
如图9所示,计算机系统900包括中央处理单元(CPU)901,其可以根据存储在只读存储器(ROM)902中的程序或者从存储部分908加载到随机访问存储器(RAM)903中的程序而执行各种适当的动作和处理。在RAM 903中,还存储有系统900操作所需的各种程序和数据。CPU 901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。
以下部件连接至I/O接口905:包括键盘、鼠标等的输入部分906;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分907;包括硬盘等的存储部分908;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分909。通信部分909经由诸如因特网的网络执行通信处理。驱动器910也根据需要连接至I/O接口905。可拆卸介质911,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器910上,以便于从其上读出的计算机程序根据需要被安装入存储部分908。
特别地,根据本公开的实施例,上文参考流程图图5-6描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在机器可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分909从网络上被下载和安装,和/或从可拆卸介质911被安装。在该计算机程序被中央处理单元(CPU)901执行时,执行本申请的系统中限定的上述功能。
需要说明的是,本公开所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,前述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元或模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元或模块也可以设置在处理器中,例如,可以描述为:一种处理器包括接收模块及投影模块。其中,这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定,例如,投影模块还可以被描述为“用于将所述第一实景图像和所述第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,所述投影空间用于无缝地呈现所述第一实景图像和所述第二实景图像”。
作为另一方面,本申请还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中的。上述计算机可读存储介质存储有一个或者多个程序,当上述前述程序被一个或者一个以上的处理器用来执行描述于本申请的投影方法。
综上所述,本申请实施例提供的投影方法、装置、系统及投影设备,通过接收由作为授课者的第一目标的实景图像以及作为同学的第二目标的实景图像合成的图像组,并根据预先设置的位置关系,将第一实景图像和第二实景图像分布投影在某个第二目标所在的投影空间内对应的投影幕布上,使得在投影空间内无缝的呈现第一实景图像和第二实景图像,从而构成逼真的多学生参与的线下虚拟教学场景,实现了线上与线下教学的融合,使得每个线上受教的学生能够实时体验线下教学的交流体验,提高了用户的体验度。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离前述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种投影方法,其特征在于,所述方法包括:
接收图像组,所述图像组包括第一实景图像与至少一个第二实景图像,所述第一实景图像包含第一目标对象,所述第二实景图像至少包括第二目标对象;
将所述第一实景图像和所述第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,所述投影空间用于无缝地呈现所述第一实景图像和所述第二实景图像。
2.根据权利要求1所述的投影方法,其特征在于,所述将所述第一实景图像和所述第二实景图像按照预先设置的位置关系分别投影至与之对应的投影幕布还包括:
识别所述第一实景图像的第一标识和所述第二实景图像的第二标识;
按照所述第一标识和所述第二标识对应的位置投影所述第一实景图像与所述第二实景图像。
3.一种投影方法,其特征在于,所述方法包括:
接收控制请求,及第一目标对象的第一实景图像,及至少一个第二目标对象的第二实景图像,及至少一个所述第二目标对象与其所在的投影空间的投影幕布上的投影图像的位置关系图像;
响应于所述控制请求,基于所述位置关系图像,对所述第一实景图像及至少一个所述第二实景图像进行合成,得到图像组;
向分路投影设备发送所述图像组,使得所述分路投影设备将所述第一实景图像和所述第二实景图像按照预先设置的位置关系分别投影至投影空间内的投影幕布上,所述投影空间用于无缝地呈现所述第一实景图像和所述第二实景图像。
4.根据权利要求3所述的投影方法,其特征在于,所述基于所述位置关系图像,对第一实景图像及至少一个第二实景图像进行合成,得到图像组包括:
识别所述第一实景图像的第一标识及所述第二实景图像的第二标识;
基于所述位置关系图像、所述第二目标对象的标识、所述第一标识及所述第二标识,对所述第一实景图像及至少一个所述第二实景图像进行合成,生成所述图像组。
5.根据权利要求3或4任一项所述的投影方法,其特征在于,所述方法还包括:
接收第一移动终端和/或第二移动终端发送的登录或注册请求,所述登录或注册请求是所述第一移动终端或所述第二移动终端响应于所述第一目标或所述第二目标输入的登录消息或注册消息生成的。
6.一种投影装置,其特征在于,包括:
接收模块,用于接收图像组,所述图像组包括第一实景图像与至少一个第二实景图像,所述第一实景图像包含第一目标对象,所述第二实景图像至少包括第二目标对象;
投影模块,用于将所述第一实景图像和所述第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,所述投影空间用于无缝地呈现所述第一实景图像和所述第二实景图像。
7.一种投影装置,其特征在于,包括:
接收模块,用于接收控制请求,及第一目标的第一实景图像,及至少一个第二目标的第二实景图像,及至少一个所述第二目标与其所在的投影空间的投影幕布上的投影图像的位置关系图像;
合成模块,用于响应于所述控制请求,基于所述位置关系图像,对第一实景图像及至少一个第二实景图像进行合成,得到图像组;
发送模块,用于向分路投影设备发送所述图像组,使得所述分路投影设备将所述第一实景图像和所述第二实景图像按照预先设置的位置关系分别投影至投影空间内与之对应的投影幕布,所述投影空间用于无缝地呈现所述第一实景图像和所述第二实景图像。
8.一种投影系统,其特征在于,包括:
投影帐篷,包括多个投影幕布,多个所述投影幕布围成投影空间;
设置在所述投影帐篷内的分路投影设备,接收图像组,并按照预先设置的位置关系,将所述图像组中的第一实景图像和第二实景图像投影至投影空间内与之对应的投影幕布,所述投影空间用于无缝地呈现所述第一实景图像和所述第二实景图像,所述第一实景图像包含第一目标对象,所述第二实景图像至少包括第二目标对象;
设置在所述投影帐篷内的第一摄像头、至少一个第二摄像头及至少一个第三摄像头,所述第一摄像头采集所述第一实景图像,所述第二摄像头采集所述第二实景图像,所述第三摄像头采集所述第二目标与其所在的投影空间内投影幕布上的投影图像的位置关系图像。
9.根据权利要求7或8任一项所述的投影系统,其特征在于,所述第一摄像头和/或所述第二摄像头为移动设备自带的摄像头,所述第三摄像头还采集所述第一目标的投影图像与所述第二目标的投影图像之间的位置关系。
10.一种分路投影设备,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1或2所述的方法。
CN201910718759.6A 2019-08-05 2019-08-05 投影方法、装置、系统及投影设备 Pending CN110365959A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910718759.6A CN110365959A (zh) 2019-08-05 2019-08-05 投影方法、装置、系统及投影设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910718759.6A CN110365959A (zh) 2019-08-05 2019-08-05 投影方法、装置、系统及投影设备

Publications (1)

Publication Number Publication Date
CN110365959A true CN110365959A (zh) 2019-10-22

Family

ID=68223252

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910718759.6A Pending CN110365959A (zh) 2019-08-05 2019-08-05 投影方法、装置、系统及投影设备

Country Status (1)

Country Link
CN (1) CN110365959A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111240175A (zh) * 2020-03-13 2020-06-05 联想(北京)有限公司 投影控制方法、装置及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106205245A (zh) * 2016-07-15 2016-12-07 深圳市豆娱科技有限公司 沉浸式在线教学系统、方法和装置
CN106781755A (zh) * 2017-01-18 2017-05-31 广州远大信息发展有限公司 一种基于虚拟现实的教学系统及方法
CN107426524A (zh) * 2017-06-06 2017-12-01 微鲸科技有限公司 一种基于虚拟全景的多方会议的方法及设备
CN108513117A (zh) * 2018-05-09 2018-09-07 北京邦邦共赢网络科技有限公司 一种基于全息投影的影像投射方法及装置
CN108961421A (zh) * 2018-06-27 2018-12-07 深圳中兴网信科技有限公司 虚拟空间的控制方法、控制系统和计算机可读存储介质
CN109274924A (zh) * 2018-12-07 2019-01-25 合肥万户网络技术有限公司 一种基于虚拟现实的视频会议方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106205245A (zh) * 2016-07-15 2016-12-07 深圳市豆娱科技有限公司 沉浸式在线教学系统、方法和装置
CN106781755A (zh) * 2017-01-18 2017-05-31 广州远大信息发展有限公司 一种基于虚拟现实的教学系统及方法
CN107426524A (zh) * 2017-06-06 2017-12-01 微鲸科技有限公司 一种基于虚拟全景的多方会议的方法及设备
CN108513117A (zh) * 2018-05-09 2018-09-07 北京邦邦共赢网络科技有限公司 一种基于全息投影的影像投射方法及装置
CN108961421A (zh) * 2018-06-27 2018-12-07 深圳中兴网信科技有限公司 虚拟空间的控制方法、控制系统和计算机可读存储介质
CN109274924A (zh) * 2018-12-07 2019-01-25 合肥万户网络技术有限公司 一种基于虚拟现实的视频会议方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111240175A (zh) * 2020-03-13 2020-06-05 联想(北京)有限公司 投影控制方法、装置及系统

Similar Documents

Publication Publication Date Title
CN210091423U (zh) 一种基于全息投影的远程教学互动系统
KR101839122B1 (ko) 다중 사용자의 현실 공간상 위치와 연동하는 다중 접속 가상공간 제공 시스템 및 다중 접속 가상공간에서 3d 가상현실 영상을 제공하는 방법
KR102217783B1 (ko) 학습자-교수자간 상호작용 극대화를 위한 5g 텔레프레즌스 기반 hy-live(하이-라이브) 교육 시스템
CN110427107A (zh) 虚拟与现实互动教学方法及系统、服务器、存储介质
CN111242704B (zh) 用于在现实场景中叠加直播人物影像的方法和电子设备
CN112286354A (zh) 基于虚拟现实的教育教学方法和系统
JP2004054533A (ja) 案内情報提供システム、案内情報提供方法、案内情報提供プログラム及びそのプログラムを記録した記録媒体
CN112509401A (zh) 一种基于增强现实投影交互的远程实操教学方法与系统
Dooley et al. The intelligent classroom: Beyond four walls
WO2024188038A1 (zh) 基于沉浸式xr智慧课堂的教学方法、系统及介质
CN108831216B (zh) 真三维虚拟仿真交互方法及系统
CN110365959A (zh) 投影方法、装置、系统及投影设备
TWI726233B (zh) 智慧型錄播互動教學教室系統及其操作方法
De Leo et al. A virtual reality system for the training of volunteers involved in health emergency situations
Wehking et al. How to record 360-degree videos of field trips for education in civil engineering
CN110139030A (zh) 混合现实处理系统、方法、服务器及其存储介质
WO2012154792A2 (en) Cross-platform portable personal video compositing and media content distribution system
CN115297224A (zh) 一种校园虚拟偶像直播方法、系统、装置及存储介质
US20220150290A1 (en) Adaptive collaborative real-time remote remediation
Nummenmaa et al. Space Pace: Method for creating augmented reality tours based on 360 videos
Miltenoff Video 360 and augmented reality: Visualization to help educators enter the era of extended reality
Kalushkov et al. Models For Implementation Of Augmented And Virtual Reality Technologies In Folklore Dancing Halls
徐学思 Research on personal tele-Immersion system in 5G background
Ariffin et al. User acceptance of panoramic views as a technique for virtual tour in an educational environment
CN214586802U (zh) 基于ar的远程沉浸式仿真教室

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191022

RJ01 Rejection of invention patent application after publication