CN113676709A - 智能投影设备及多屏显示方法 - Google Patents

智能投影设备及多屏显示方法 Download PDF

Info

Publication number
CN113676709A
CN113676709A CN202110360544.9A CN202110360544A CN113676709A CN 113676709 A CN113676709 A CN 113676709A CN 202110360544 A CN202110360544 A CN 202110360544A CN 113676709 A CN113676709 A CN 113676709A
Authority
CN
China
Prior art keywords
display screen
interface
user
virtual display
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110360544.9A
Other languages
English (en)
Other versions
CN113676709B (zh
Inventor
董鹏
王光强
常亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Juhaokan Technology Co Ltd
Original Assignee
Juhaokan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Juhaokan Technology Co Ltd filed Critical Juhaokan Technology Co Ltd
Publication of CN113676709A publication Critical patent/CN113676709A/zh
Application granted granted Critical
Publication of CN113676709B publication Critical patent/CN113676709B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3147Multi-projection systems
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21VFUNCTIONAL FEATURES OR DETAILS OF LIGHTING DEVICES OR SYSTEMS THEREOF; STRUCTURAL COMBINATIONS OF LIGHTING DEVICES WITH OTHER ARTICLES, NOT OTHERWISE PROVIDED FOR
    • F21V33/00Structural combinations of lighting devices with other articles, not otherwise provided for
    • F21V33/0004Personal or domestic articles
    • F21V33/0052Audio or video equipment, e.g. televisions, telephones, cameras or computers; Remote control devices therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof

Abstract

本申请实施例提供了一种智能投影设备及多屏显示方法,所述智能投影设备包括:投影结构,数量为至少两个,用于投影形成虚拟显示屏;摄像头,用于采集所述虚拟显示屏上的操作反馈信息,并向控制器发送所述操作反馈信息;控制器,所述控制器内存储有每个虚拟显示屏对应的显示屏标识,所述控制器被配置为:接收所述操作反馈信息;获取应用程序对所述操作反馈信息的响应数据;若所述响应数据为包含一个显示屏标识的一组界面数据,在所述显示屏标识对应的虚拟显示屏上显示所述界面数据对应的界面;若所述响应数据为多组界面数据,分别在不同的虚拟显示屏上显示一组界面数据对应的界面。本申请解决了投影画面存在遮挡的技术问题。

Description

智能投影设备及多屏显示方法
技术领域
本申请涉及投影技术领域,尤其涉及一种智能投影设备及多屏显示方法。
背景技术
投影设备是一种可以将图像或视频投射到物体上进行显示的设备,与能够直接在屏幕上显示图像或视频的显示设备相比,投影设备以其投影界面尺寸大、安装灵活、能够保护视力等优点,逐渐获得了越来越多的用户喜爱。
传统的投影设备通过连接一个显示设备来获取需要投影的内容,投影设备的投影界面通常与显示设备的显示界面相一致。显示设备由于其显示面积可能较小,在无法将全部需要显示的信息平铺展示时,通常会将一些信息进行叠加显示,部分显示内容将被遮挡,例如,对于一些设置有视频聊天功能的应用程序,显示设备通常会将视频聊天窗口叠加显示在应用程序的主界面上方,投影设备在将该应用程序界面进行投影时,投影出来的界面也是叠加显示的界面,用户体验仍然不佳。
发明内容
为解决投影效果不佳的技术问题,本申请提供了一种智能投影设备及多屏显示方法。
第一方面,本申请提供了一种智能投影设备,该智能投影设备包括:
投影结构,数量为至少两个,用于投影形成虚拟显示屏,多个所述投影结构投影形成的虚拟显示屏位置不同;
摄像头,用于采集所述虚拟显示屏上的操作反馈信息,并向控制器发送所述操作反馈信息;
控制器,所述控制器内存储有每个虚拟显示屏对应的显示屏标识,所述控制器被配置为:
接收所述操作反馈信息;
获取应用程序对所述操作反馈信息的响应数据;
若所述响应数据为包含一个显示屏标识的一组界面数据,在所述显示屏标识对应的虚拟显示屏上显示所述界面数据对应的界面;
若所述响应数据为多组界面数据,分别在不同的虚拟显示屏上显示一组界面数据对应的界面。
在一些实施例中,所述控制器还被配置为:
所述响应数据为不包含任一个显示屏标识的一组界面数据,在默认的虚拟显示屏上显示所述界面数据对应的界面。
在一些实施例中,所述控制器还被配置为:
若所述响应数据为所述应用程序的退出指令,在所述应用程序对应的每个虚拟显示屏上分别退出所述应用程序的界面。
第二方面,本申请提供了一种多屏显示方法,用于应用程序,该方法包括:
接收启动指令;
响应于所述启动指令,检测当前设备是否设置有多个显示屏标识;
若所述当前设备设置有多个显示屏标识,则进入多屏显示模式;
若所述当前设备只有一个显示屏标识,则进入单屏显示模式;
其中,在所述多屏显示模式下,所述应用程序被配置为根据用户的操作指令生成设置有一个显示屏标识的一组响应数据,或生成多组响应数据,在所述单屏显示模式下,所述应用程序被配置为根据用户输入的操作指令生成不设置有所述显示屏标识的响应数据。
第三方面,本申请提供了一种多屏显示方法,用于智能投影设备,该方法包括:
接收用户输入的操作反馈信息;
获取应用程序对所述操作反馈信息的响应数据;
若所述响应数据为包含一个显示屏标识的一组界面数据,在所述显示屏标识对应的虚拟显示屏上显示所述界面数据对应的界面;
若所述响应数据为多组界面数据,分别在不同的虚拟显示屏上显示一组界面数据对应的界面。
本申请提供的智能投影设备及多屏显示方法的有益效果包括:
本申请实施例通过在智能投影设备中存储显示屏标识,使得应用程序在需要展示多个界面时,可根据该智能投影设备具有多个显示屏标识,生成多组界面数据,使智能投影设备将这多组界面数据对应的界面在多个虚拟显示屏上分开显示,从而使得多个界面不会相互遮挡,提高了显示效果。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一些实施例中智能台灯的结构示意图;
图2为本申请一些实施例中虚拟显示屏形成位置的示意图;
图3为本申请一些实施例中智能台灯的另一结构示意图;
图4为本申请一些实施例中待机界面的示意图;
图5A为本申请一些实施例中教育界面的示意图;
图5B为本申请一些实施例中娱乐界面的示意图;
图5C为本申请一些实施例中墙面启动器界面的示意图;
图6为本申请一些实施例中进行界面切换时的示意图;
图7为本申请一些实施例中进程管理页面的示意图;
图8为本申请一些实施例中二屏控制控件D对应的显示控制界面D0的示意图;
图9为本申请一些实施例中用户使用台灯的时序流程示意图;
图10A为本申请一些实施例中棋类游戏模式下用户智能台灯的第一虚拟显示屏VS1显示页面的示意图;
图10B为本申请一些实施例中棋类游戏模式下用户智能台灯的第二虚拟显示屏VS2显示页面的示意图;
图11A为本申请一些实施例中创建房间界面时用户智能台灯的第一虚拟显示屏VS1显示页面的示意图;
图11B为本申请一些实施例中创建房间界面时用户智能台灯的第二虚拟显示屏VS2显示页面的示意图;
图12为本申请一些实施例中邀请好友时用户智能台灯的第一虚拟显示屏VS1显示页面的示意图;
图13为本申请一些实施例中好友接受邀请后用户(邀请用户)智能台灯的第一虚拟显示屏VS1显示页面的示意图;
图14为本申请一些实施例中接受邀请后用户(被邀请用户)智能台灯的第一虚拟显示屏VS1显示页面的示意图;
图15为本申请一些实施例中向好友发送视频通话请求时用户(邀请用户)智能台灯的第二虚拟显示屏VS2显示页面的示意图;
图16为本申请一些实施例中向好友发送视频通话请求时用户(邀请用户)智能台灯的第二虚拟显示屏VS2显示页面的示意图;
图17A为本申请一些实施例中下棋过程中用户智能台灯的第二虚拟显示屏VS1显示页面的示意图;
图17B为本申请一些实施例中下棋过程中用户智能台灯的第一虚拟显示屏VS1显示页面的示意图。
具体实施方式
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
台灯是一种辅助人们阅读、学习和工作的照明工具,随着技术的进步,人们生活中的常见家居设备都朝着智能化的方向发展,在此浪潮下,台灯的功能也越来越丰富。在一些实施例中,台灯可设置有投影结构,能够与显示设备连接,实现投影仪的投影功能,这种台灯可称为智能台灯。
然而,传统的投影技术都是将显示设备的内容直接投影出来,如果显示设备显示的内容是叠加的内容,投影出来的画面显示的也是叠加的内容,例如,在视频聊天场景下,聊天窗口通常是叠加在原有界面的上方,这会对原有界面的内容造成遮挡,影响用户的观看体验。
为解决上述技术问题,本申请实施例通过在台灯上设置多个投影结构,使台灯能够投影得到多个画面,再将应用程序的多个界面在投影出的多个画面上分开显示,从而可使多个界面不再相互遮挡。
图1为本申请一些实施例提供的智能台灯的结构示意图,如图1所示,该智能台灯包括:至少两个投影结构、控制器200以及摄像头300。控制器200分别与至少两个投影结构以及摄像头300连接,从而,控制器200可以对至少两个投影结构的工作状态进行控制,以及获取摄像头300所拍摄的内容。
在一些实施例中,智能台灯还包括底座、支架和照明灯泡,照明灯、投影结构和摄像头都可设置在支架上,支架可设置在底座上,控制器200可设置在底座内部。
在一些实施例中,智能台灯中的控制器200具备网络通信功能,从而可使得当前的智能台灯可以和其他智能台灯、智能终端(例如手机)或者服务器(例如网络平台)进行通信,从而获取投影内容。
在一些实施例中,智能台灯中的控制器200还可安装有操作系统,从而不需要与显示设备连接就能进行投影,当然,安装有操作系统的智能台灯也可具有网络通信功能,从而能够与服务器等设备进行通信,以实现一些网络功能,如升级操作系统、安装应用程序、与其他智能台灯互动等等。参见图1,至少两个投影结构至少包括第一投影结构110以及第二投影结构120,第一投影结构110用于投影形成第一虚拟显示屏VS1;第二投影结构120用于投影形成第二虚拟显示屏VS2,第一虚拟显示屏VS1与第二虚拟显示屏VS2的形成位置不同。
例如,图2为本申请一些实施例中虚拟显示屏形成位置的示意图,如图2所示,第一投影结构110投影形成的第一虚拟显示屏VS1可以是形成于设置智能台灯的桌子的桌面上,第二投影结构120投影形成的第二虚拟显示屏VS2可以是形成于桌子所靠的墙面上。可以理解,在实际应用中,虚拟显示屏的形成位置可以根据实际需要进行调整。
可以理解,第一虚拟显示屏VS1的具体显示内容可以和第二虚拟显示屏VS2的具体显示内容不同,从而,两个虚拟显示屏相互配合,以起到对容量大、复杂度高的内容进行全面显示的目的。
在至少两个投影结构分别投影形成至少两个虚拟显示屏后,摄像头300用于采集至少一个虚拟显示屏上的操作反馈信息,并将操作反馈信息发送至控制器200,该操作反馈信息具体可以是用户对虚拟显示屏上的显示内容的操作点击信息等。
例如,摄像头300可以是只采集第一虚拟显示屏VS1上的操作反馈信息,也可以是只采集第二虚拟显示屏VS2上的操作反馈信息,也可以是同时采集第一虚拟显示屏VS1以及第二虚拟显示屏VS2上的操作反馈信息。
另外,基于需要采集操作反馈信息的虚拟显示屏的数量,可以设置摄像头300的数量为多个,即单个摄像头采集单个虚拟显示屏的操作反馈信息。
在一些实施例中,摄像头300可为红外摄像头,从而可利用红外检测技术,在夜晚、阴天等光线不好的场景下,也能保障获取的操作反馈信息的准确性。
在一些实施例中,摄像头300除了采集操作反馈信息,还可采集用户图像,以实现视频通话、拍照等功能。
在至少两个投影结构分别投影形成至少两个虚拟显示屏后,控制器200用于控制至少两个投影结构分别在至少两个虚拟显示屏上的投影内容,以及,在接收到摄像头300发送的操作反馈信息后,基于至少一个虚拟显示屏上的操作反馈信息对至少两个投影结构的投影内容进行调整。
例如,控制器200可以是基于操作反馈信息只对第一投影结构110在第一虚拟显示屏VS1上的投影内容进行调整,也可以是基于操作反馈信息只对第二投影结构120在第二虚拟显示屏VS2上的投影内容进行调整,还可以是基于操作反馈信息同时对第一投影结构110在第一虚拟显示屏VS1上的投影内容、以及第二投影结构120在第二虚拟显示屏VS2上的投影内容进行调整。
可以理解,两个投影结构仅为本申请中智能台灯进行多屏投影的一种示例性说明,至少两个投影结构还可以是其他数量的投影结构,例如,3个或者大于3个等,本申请对智能台灯的投影结构的数量不做具体限定。另外,为了便于解释说明,本申请各实施例均以两个投影结构为例,对本申请的技术方案进行解释说明。
在一些实施例中,本申请中,控制器200的数量可以是多个,具体可以是和投影结构的数量相同,从而,可以设置单个控制器控制单个投影结构的投影内容,且各个控制器之间存在通信连接。
例如,对于至少两个投影结构至少包括第一投影结构110以及第二投影结构120的情况,控制器200具体可以是包括第一控制器以及第二控制器,其中,第一控制器控制第一投影结构110的投影内容,第二控制器控制第二投影结构120的投影内容,且第一控制器和第二控制器存在通信连接。
在一些实施例中,多个控制器可以是集中设置,即多个控制器设置于智能台灯中的同一指定位置;也可以是分开设置,即控制器分别与对应的投影结构相对应设置等,本申请对多个控制器的设置位置不做限定。
一些实施例提供一种智能台灯,该智能台灯包括至少两个投影结构,即本申请属于多屏投影的智能台灯,并且,每个投影结构投影形成的虚拟显示屏的形成位置不同,从而可以在不同位置形成多个虚拟显示屏,通过多个虚拟显示屏配合显示,以起到全面显示容量大、复杂度高的显示内容的目的。同时,通过摄像头获取虚拟显示屏上的操作反馈信息,并根据操作反馈信息对投影内容进行调整,从而可以进一步增强不同用户之间的互动性。
图3为本申请一些实施例提供的智能台灯的另一结构示意图,如图3所示,第一投影结构110包括:第一光源112、第一成像单元114以及第一镜头116;其中,第一光源112用于发光,第一成像单元114用于基于第一光源112发出的光形成图案,第一光源112以及第一成像单元114用于配合形成第一投影图案;第一镜头116用于对第一投影图案进行放大,从而,第一光源112、第一成像单元114以及第一镜头116配合工作以在第一投影结构110对应的第一虚拟显示屏VS1上显示对应的显示内容。在一些实施例中,第一光源112包括三色光源、白光光源以及蓝光光轮光源中的至少一种。其中,三色光源以及蓝光光轮光源用于发出不同颜色的光,以使得在第一虚拟显示屏VS1上可以显示彩色的内容。白光光源用于发出白光,以实现基本的台灯照明功能。
在一些实施例中,第一光源112可以只包括白光光源,从而可以实现基本的照明功能。第一光源112可以只包括三色光源或只包括蓝光光轮光源,从而可以在需要进行投影时,在第一虚拟显示屏VS1上显示彩色内容。第一光源112可以同时包含白光光源以及三色光源,或者,同时包含白光光源以及蓝光光轮光源,或者,同时包含白光光源、三色光源以及蓝光光轮光源,从而在实现基本照明功能的同时,也可以在第一虚拟显示屏VS1上显示彩色内容。
参见图3,第二投影结构120包括:第二光源122、第二成像单元124以及第二镜头126;其中,第二光源122用于发光,第二成像单元124用于基于第二光源122发出的光形成图案,第二光源122以及第二成像单元124用于配合形成第二投影图案;第二镜头126用于对第二投影图案进行放大,从而,第二光源122、第二成像单元124以及第二镜头126配合工作以在第二投影结构120对应的第二虚拟显示屏VS2上显示对应的显示内容。
在一些实施例中,第二光源122包括三色光源、白光光源以及蓝光光轮光源中的至少一种。其中,三色光源以及蓝光光轮光源用于发出不同颜色的光,以使得在第二虚拟显示屏VS2上可以显示彩色的内容。白光光源用于发出白光,以实现基本的台灯照明功能。
在一些实施例中,第二光源122可以只包括白光光源,从而可以实现基本的照明功能。第二光源122可以只包括三色光源或只包括蓝光光轮光源,从而可以在需要进行投影时,在第二虚拟显示屏VS2上显示彩色内容。第二光源122可以同时包含白光光源以及三色光源,或者,同时包含白光光源以及蓝光光轮光源,或者,同时包含白光光源、三色光源以及蓝光光轮光源,从而在实现基本照明功能的同时,也可以在第二虚拟显示屏VS2上显示彩色内容。
在一些实施例中,投影结构中的镜头为焦距可调镜头,控制器200可以通过调整镜头的焦距对投影图像的大小进行调整。
在一些实施例中,第一光源112和第二光源122可以是不同的光源分别为不同的成像单元提供光束,也可以是同一个光源通过分光为不同的成像单元提供光束。
在一个实施例中,智能台灯可以包括以下一个或多个组件:存储组件,电源组件,音频组件以及通信组件。
存储组件被配置为存储各种类型的数据以支持在智能台灯的操作。这些数据的示例包括用于在智能台灯上投影显示的学生习题、考试试卷、电子课本、习题分析与讲解等,数据的类型具体包括文档、图片、音频以及视频等。存储组件可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件为智能台灯的各种组件提供电力。电源组件可以包括电源管理系统,一个或多个电源,及其他与为智能台灯生成、管理和分配电力相关联的组件。
音频组件被配置为输出和/或输入音频信号。例如,音频组件包括一个麦克风(MIC),当智能台灯处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储组件或经由通信组件发送。在一些实施例中,音频组件还包括一个扬声器,用于输出音频信号。
通信组件被配置为便于智能台灯和其他设备之间有线或无线方式的通信。智能台灯可以接入基于通信标准的无线网络,如WiFi、4G或5G等,或它们的组合。在一个示例性实施例中,通信组件经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在一个实施例中,对摄像头300采集操作反馈信息的原理进行解释说明。
实际的成像界面可以成为虚拟显示屏,在一些实施例中虚拟显示屏可以是呈现投影图像的桌面,墙面,专用的投影屏幕等其他表面结构,用户在虚拟显示屏的操作是通过摄像头采集的图像或受控的位置传感设备传递的位置信息识别出来的。
示例性的一些操作获取方式如下:
(一)运动轨迹
在控制器200控制投影结构在虚拟显示屏上投影后,摄像头300实时拍摄用户手指在虚拟显示屏上的影像,并将影像发送至控制器200。控制器200通过指尖追踪技术对影像中用户指尖进行识别,从而,基于指尖的运动轨迹即可得到用户在虚拟显示屏上的操作轨迹。
在一些实施例中,在摄像头300获取的影像中,若只包含单个手指,则基于该手指的指尖确定用户的操作轨迹;若包含多个手指,则基于特定手指的指尖确定用户的操作轨迹,特定手指例如可以是食指等,或者确定多个指尖的轨迹。
(二)点击操作
智能台灯的摄像头300设置于用户手指上方,在用户进行手指下压点击的操作时,用户指尖图像会发生一定的变化,控制器200可以根据指尖图像的变化来识别用户是否进行了点击操作。
例如,在摄像头300位置固定的情况下,在用户进行手指下压点击的操作时,指尖与摄像头300之间的距离会发生变化,在摄像头300获取的影像中,手指下压点击之前的指尖图案尺寸大于手指下压点击之后的指尖图案尺寸,从而,在指尖图案的尺寸发生变化时,可以认为用户进行了下压点击操作。
又例如,部分用户在进行点击时,会存在指尖下弯的情况,导致影像中出现指尖图案发生形变或者不完整的情况,从而,在指尖图案发生形变或者显示不完整时,可以认为用户进行了下压点击操作。
可以理解,在指尖图像刚发生变化时,可以认为用户处于指尖按下状态;在指尖图像恢复原状后,可以认为用户处于指尖抬起状态,从而,用户指尖图像发生一次变化,可以认为用户进行了一次有效的点击操作。
(三)单击操作
在控制器200确认用户处于指尖按下的状态时,记录该状态的位置点Point1的位置坐标以及时间戳。
在确认用户处于指尖抬起的状态时,记录该状态的位置点Point2的位置坐标以及时间戳。
如果位置点Point1的位置坐标与位置点Point2的位置坐标之间的距离小于预设阈值,且位置点Point1的时间戳与位置点Point2的时间戳之间的时间差小于预设阈值,则认为用户在位置点Point1(同Point2)发生了单击操作。
(四)双击操作
在控制器200确认用户进行了第一次有效点击操作时,记录该点击操作的位置点Point3的位置坐标以及时间戳。
在确认用户进行了第二次有效点击操作时,记录该点击操作的位置点Point4的位置坐标以及时间戳。
如果位置点Point3的位置坐标与位置点Point4的位置坐标之间的距离小于预设阈值,且位置点Point3的时间戳与位置点Point4的时间戳之间的时间差小于预设阈值,则认为用户在位置点Point3、Point4进行的点击操作构成一次有效的双击操作。
可以理解,多次点击操作的识别原理与双击操作类似,在此不再赘述。
(五)长按操作
在控制器200确认用户处于指尖按下的状态时,记录该状态的位置点Point5的位置坐标以及时间戳。
在确认用户处于指尖抬起的状态时,记录该状态的位置点Point6的位置坐标以及时间戳。
如果位置点Point5的位置坐标与位置点Point6的位置坐标之间的距离小于预设阈值,且位置点Point5的时间戳与位置点Point6的时间戳之间的时间差大于预设阈值,则认为用户在位置点Point5(同Point6)发生了长按操作。
(六)滑动操作
在控制器200确认用户处于指尖按下的状态时,记录该状态的位置点Point7的位置坐标以及时间戳。
在确认用户处于指尖抬起的状态时,记录该状态的位置点Point8的位置坐标以及时间戳。
如果位置点Point7的位置坐标与位置点Point8的位置坐标之间的距离大于预设阈值,且位置点Point7的时间戳与位置点Point8的时间戳之间的时间差大于预设阈值,则认为用户在位置点Point7至Point8之间发生了滑动操作。
可以理解,滑动操作可以是侧向滑动,如向左滑动或向右滑动,也可以是纵向滑动,如向上滑动或向下滑动,也可以是斜向滑动,如向左上滑动或向右下滑动等。
在一些实施例中,可以基于位置点Point7与Point8的位置坐标确定滑动距离以及滑动方向(默认位置坐标系中向右为X轴正方向,向上为Y轴正方向)。
例如,滑动距离可以通过以下公式计算:
Figure BDA0003005373430000081
其中,dis为滑动距离,x7、y7为位置点Point7的位置坐标,x8、y8为位置点Point8的位置坐标。
在x7=x8,或者x7与x8的差值小于预设阈值时,若y7>y8,则滑动方向为向下滑;若y7<y8,则滑动方向为向上滑。
在y7=y8,或者y7与y8的差值小于预设阈值时,若x7>x8,则滑动方向为向坐滑;若x7<x8,则滑动方向为向右滑。
在x7>x8时,若y7>y8,则滑动方向为向左下方滑;若y7<y8,则滑动方向为向左上方滑。
在x7<x8时,若y7>y8,则滑动方向为向右下方滑;若y7<y8,则滑动方向为向右上方滑。
在一个实施例中,也可以是通过其他外设来模拟用户在虚拟显示屏上的操作。外设具体例如感应笔等。
在一些实施例中,感应笔的笔尖设置有位置传感器,位置传感器实时将笔尖的位置发送至智能台灯的控制器200,从而,智能台灯通过控制器200发送的位置变化情况获取用户在虚拟显示屏上的操作轨迹。
另外,感应笔的笔尖设置有按压感应结构(例如压力传感器等),当用户需要进行点击操作时,用户可以使用感应笔触碰桌面,从而按压感应结构获取按压信号,并将获取的按压信号发送至智能台灯的控制器200,控制器200基于笔记的当前位置以及按压信号,即可确定用户进行点击的位置。
可以理解,用户通过感应笔进行其他操作(例如双击、长按等)的原理与通过指尖进行操作的原理相同,在此不再赘述。
以下对本申请中智能台灯的工作场景进行解释说明,为了便于理解,以下各实施例中,均以智能台灯包含单个控制器200、两个投影结构(第一投影结构110以及第二投影结构120)、单个摄像头300为例进行阐述,其中,摄像头300只采集第一虚拟显示屏VS1上的操作反馈信息,第一投影结构110投影形成的第一虚拟显示屏VS1形成于设置智能台灯的桌子的桌面上,第二投影结构120投影形成的第二虚拟显示屏VS2形成于桌子所靠的墙面上。
在一个实施例中,对智能台灯的工作状态控制进行解释说明。一些实施例中,智能台灯的工作状态包括开机、关机以及待机。
智能台灯的灯体上设置有开关键。该开关键具体可以是物理按压式结构或者是触控结构,当开关键为物理按压式结构时,若用户按压该开关键,则可以认为开关键处于活跃状态;当开关键为触控结构时,若用户的肢体部位(例如手指)放置于该开关键表面,则可以认为开关键处于活跃状态。
(1)开机
在智能台灯当前处于关机状态时,若检测到开关键处于活跃状态,则开启智能台灯,即将智能台灯由关机状态调整为工作状态。
在一些实施例中,开关键处于活跃状态是指开机键接受到按压的状态。
在一些实施例中,在智能台灯当前处于关机状态时,若检测到开关键处于活跃状态时,并不直接开启智能台灯,此时,获取开关键处于活跃状态的持续时长,若开关键处于活跃状态的持续时长达到第一预设时长T1(例如3秒),才开启智能台灯,否则不开启智能台灯,从而可以避免用户误触碰导致智能台灯开机的情况。
在开启智能台灯时,第一虚拟显示屏VS1以及第二虚拟显示屏VS2均展示预设的开机动画,第一虚拟显示屏VS1及第二虚拟显示屏VS2展示的开机动画可以相同,也可以不同。在第一虚拟显示屏VS1及第二虚拟显示屏VS2展示开机动画的时间达到第二预设时长T2(例如5-10秒等)后,第一虚拟显示屏VS1及第二虚拟显示屏VS2进入对应的工作界面。
(2)关机
在智能台灯当前处于开机状态时,若检测到开关键处于活跃状态,则关闭智能台灯,即将智能台灯由工作状态调整为关机状态。
在一些实施例中,在智能台灯当前处于开机状态时,若检测到开关键处于活跃状态时,并不直接关闭智能台灯,此时,获取开关键处于活跃状态的持续时长,若开关键处于活跃状态的持续时长达到第三预设时长T3(例如3秒,第三预设时长T3可以和第一预设时长T1相同),才关闭智能台灯,否则不关闭智能台灯,从而可以避免用户误触碰导致智能台灯关机的情况。
在关闭智能台灯时,第一虚拟显示屏VS1以及第二虚拟显示屏VS2均展示预设的关机动画,第一虚拟显示屏VS1及第二虚拟显示屏VS2展示的关机动画可以相同,也可以不同。第一虚拟显示屏VS1及第二虚拟显示屏VS2展示关机动画的时间具体为第四预设时长T4(例如3秒或者小于3秒)。
(3)待机
在智能台灯当前处于开机状态,但未检测到任何用户操作,且未检测到任何用户操作的时长达到第五预设时长T5(例如60秒),则智能台灯进入待机状态。其中,未检测到任何用户操作,具体是指用户未对智能台灯进行任何操作,或者,智能台灯当前维持某一静止状态(例如投影内容无变化),从而避免在播放视频等特殊情况下由于用户未进行任何操作导致智能台灯进行待机界面。
在一些实施例中,在开机和关机的触发条件为开关键处于活跃状态、且时长满足对应的预设时长时,也可以是在检测到开关键处于短暂活跃状态时,将智能台灯调整为待机状态。其中,开关键处于短暂活跃状态是指开关键处于活跃状态,但持续时长小于第一预设时长T1以及第三预设时长T3的情况,例如,用户短按开关键等。
在智能台灯进入待机状态后,第一虚拟显示屏VS1熄屏,第二虚拟显示屏VS2显示预设的待机界面。图4为待机界面的示意图,如图4所示,待机界面具体可以是时间界面等。
在智能台灯进入待机状态后,若摄像头300采集到第一虚拟显示屏VS1上的操作反馈信息,则智能台灯退出待机状态,并进入工作状态。
在一些实施例中,中智能台灯接收到预设按键操作或预设信号输入时,智能台灯退出待机状态,并进入工作状态。
在一个实施例中,对第一虚拟显示屏VS1以及第二虚拟显示屏VS2的工作界面进行解释说明。
在智能台灯进入开机状态后,第一虚拟显示屏VS1进入Launcher(桌面启动器)界面,第二虚拟显示屏VS2进入墙面启动器界面。Launcher界面即UI界面(User Interface,用户界面或使用者界面),是用户和智能台灯进行交互的媒介。Launcher界面至少包括第一界面以及第二界面,其中,第一界面具体为教育界面,第二界面具体为娱乐界面。可以理解,Launcher界面还可以包括其他类型的界面。
图5A为教育界面的示意图,如图5A所示,教育界面包括公开课模块、在线教学系统模块、教学频道模块、习题练习模块、模拟考试模块、作业批改模块、名师直播模块、设置模块以及台灯控制模块等。此外,教育界面还可以包括与学习相关的其他模块,在此不一一列举。
图5B为娱乐界面的示意图,如图5B所示,娱乐界面包括音乐模块、视频模块、游戏模块以及其他应用管理模块等,游戏模块例如桌面钢琴、棋类游戏等。此外,娱乐界面还可以包括与健康娱乐应用相关的其他模块,在此不一一列举。
需要说明的是,在一些实施例中,对于第一虚拟显示屏VS1,Launcher界面的界面下方都包含有4个控制键,分别为返回键、主页键、进程键以及最小化键。其中,返回键用于返回前一页面,主页键用于直接返回对应的Launcher界面,进程键用于显示当前的所有进程以进行进程管理,最小化键用于将当前前台运行的应用最小化处理。
在一些实施例中,用户可以通过屏幕左滑/右滑的方式进行Launcher界面的切换。例如,在当前的Launcher界面为教育界面时,用户可以进行右滑以切换至娱乐界面;在当前的Launcher界面为娱乐界面时,用户可以进行左滑以切换至教育界面。
图5C为墙面启动器界面的示意图,如图5C所示,墙面启动器界面可显示天气信息和时间信息。此外,墙面启动器界面还可显示其他信息,如用户自定义信息等等,在此不一一列举。
在一些实施例中,在智能台灯从待机状态进入开机状态后,第二虚拟显示屏VS2在无需进行内容显示的情况下,还可以继续显示预设的待机界面,例如显示如图4所示的时间界面等。
在一些实施例中,可以预先设置进入娱乐界面的密码,即在由教育界面切换至娱乐界面时,需要输入相应的密码才能切换成功,否则,用户不能使用娱乐界面的各种娱乐功能,从而可以有助于家长更好的控制娱乐界面的使用。
图6为进行界面切换时的示意图,如图6所示,用户需要输入密码才能进入娱乐界面。
在一些实施例中,获取用户的滑动操作,根据滑动操作的方向和当前的Launcher界面确定待展示的Launcher界面,如果待展示的Launcher界面被配置的密码,则在显示待展示的Launcher界面,同时设置浮层,并在浮层上显示密码输入控件,此时待展示的Launcher界面不可获取焦点。在接收到用户在密码输入控件如果密码输入成功,则取消浮层,将待展示的Launcher界面设置为可获取焦点,如果不成功,则维持密码输入控件在浮层显示。
在一些实施例中,在展示待展示的Launcher界面和浮层时,如果接收到用户的滑动操作,根据滑动操作的方向切换到下一个界面。
在一个实施例中,对第一虚拟显示屏VS1以及第二虚拟显示屏VS2的进程控制管理进行解释说明。
用户在第一虚拟显示屏VS1上进行点击进程键的操作后,摄像头300采集该操作反馈信息,并发送至控制器200,控制器200控制第一投影结构110在第一虚拟显示屏VS1上显示进程管理页面,用户可以通过进程管理页面对当前运行的进程进行管理,例如,关闭,切换显示屏等。
图7为进程管理页面的示意图,如图7所示,当前运行的多个进程层叠显示,用户可以通过上下滚动进程的方式选择需要管理的进程。例如,当前管理的进程为进程一,通过向下滚动,可以将当前管理的进程切换为进程二。
在一些实施例中,在进行当前管理的进程切换后,若用户点击选中当前管理的进程,则直接在对应的虚拟显示屏显示该当前管理进程的内容。
此外,在不同进程的对应区域设置有标签A,该标签A用于标识该进程当前在哪个虚拟显示屏上显示。在接收到输入的进程管理的指令后,获取运行的进程以及进程所呈现的位置,根据进程对应的应用在接收指令前呈现的位置(第一虚拟显示屏VS1或第二虚拟显示屏VS2),并分别根据进程对应的应用在接收指令前呈现的位置控制的进程控件的标签子控件中显示,进程对应的应用在接收指令前呈现的位置不同标签子控件显示的内容不同。例如,图7中的进程一对应的标签A1为“一屏”,即表示该进程一显示于第一虚拟显示屏VS1;进程二对应的标签A2为“二屏”,即表示该进程二显示于第二虚拟显示屏VS2;进程三对应的标签A3为“一屏+二屏”,即表示该进程三同时在第一虚拟显示屏VS1和第二虚拟显示屏VS2上显示。此时,若用户点击选中进程一,则直接在第一虚拟显示屏VS1上显示进程一对应的内容;若用户点击选中进程二,则直接在第二虚拟显示屏VS2上显示进程二对应的内容;若用户点击选中进程三,则直接在第一虚拟显示屏VS1以及第二虚拟显示屏VS2上显示进程三对应的内容。
可以理解,当前运行的多个进程也可以是以其他形式进行显示,例如,以多个小窗口的形式平铺显示等,本申请对多个进程的显示形式不做限定。
另外,本申请并不限定标签内容的表达形式,标签内容可以是数字、字母、字符的任意组合,只要用户根据该标签内容可以清楚直观地了解该进程在哪个虚拟显示屏显示即可。例如,图7中的标签内容“一屏”也可以是“1”,“二屏”也可以是“2”等。
在一些实施例中,参见图7,用户在打开进程管理页面后,除了可以看到进程显示在哪个虚拟显示屏以外,还可以对当前运行的进程进行进程关闭管理。在一些实施例中,用户可以通过进程关闭控件B关闭运行中的进程。
例如,用户可以通过点击进程一对应的进程关闭控件B1关闭进程一,通过点击进程二对应的进程关闭控件B2关闭进程二,通过点击进程三对应的进程关闭控件B3关闭进程三。从而,用户可以有针对性地关闭需要关闭的进程。
在一些实施例中,参见图7,进程管理页面还设置有一键关闭控件B0,在当前需要关闭的进程数量较多时,用户可以通过点击一键关闭控件B0来关闭所有当前运行的进程,而无需逐个点击各进程对应的进程关闭控件,从而可以提高进程关闭效率。
在用户完成进程关闭操作后,通过点击返回键,可以返回值进行进程管理之前的页面。在一些实施例中,在完成进程关闭操作后,若用户点击进程管理界面中的空白处,则返回Launcher界面中的教育界面。
在一些实施例中,参见图7,用户在打开进程管理页面后,除了可以对当前运行的进程进行进程关闭管理以外,还可以对进程当前对应的虚拟显示屏进行切换。在一些实施例中,用户可以通过屏幕切换控件C对进程进行显示屏切换。
在一些实施例中,在当前管理的进程为进程一时,进程一对应的标签A1为“一屏”,即此时进程一在接收到进程管理指令前在第一虚拟显示屏VS1上显示,此时,用户可以执行屏幕切换控件C1对应的左滑操作将进程一切换至第二虚拟显示屏VS2进行显示,此时,第一虚拟显示屏VS1不再显示进程一的内容,即,将进程一进行异屏切换显示。
在一些实施例中,在当前管理的进程为进程一时,用户可以执行屏幕切换控件C2对应的右滑操作,进程一仍在一屏展示。
在一些实施例中,在当前管理的进程为进程二时,进程二对应的标签A2为“二屏”,即此时进程二在接收到进程管理指令前在第二虚拟显示屏VS2上显示,此时,用户可以执行屏幕切换控件C2对应的右滑操作将进程二切换至第一虚拟显示屏VS1进行显示,此时,第二虚拟显示屏VS2不再显示进程二的内容,即,将进程二进行异屏切换显示。
在一些实施例中,在当前管理的进程为进程二时,用户可以执行屏幕切换控件C1对应的左滑操作,进程二仍在二屏展示。
在一些实施例中,在当前管理的进程为进程三时,进程三对应的标签A3为“一屏+二屏”,即此时进程二在接收到进程管理指令前在第一虚拟显示屏VS1及第二虚拟显示屏VS2上显示,此时,用户可以执行屏幕切换控件C1对应的左滑操作将进程三切换至第二虚拟显示屏VS2进行显示,此时,第一虚拟显示屏VS1不再显示进程三的内容,即,将进程三由双屏显示切换为单屏(第二虚拟显示屏VS2)显示。此时,第一虚拟显示屏VS1可以显示Launcher界面,例如显示教育界面等。
在一些实施例中,用户也可以执行屏幕切换控件C2对应的右滑操作将进程三切换至第一虚拟显示屏VS1进行显示,此时,第二虚拟显示屏VS2不再显示进程三的内容,即,将进程三由双屏显示切换为单屏(第一虚拟显示屏VS1)显示。此时,第二虚拟显示屏VS2可以显示Launcher界面或者时间界面。
在一些实施例中,屏幕切换控件C1以及C2为条件隐藏/显示,即,屏幕切换控件C1以及C2并非一直处于显示状态。
在一些实施例中,在当前管理的进程当前在第一虚拟显示屏VS1显示,且可以切换至第二虚拟显示屏VS2进行显示时(例如图7中的进程一),才显示屏幕切换控件C1,此时屏幕切换控件C2隐藏。
在当前管理的进程当前在第二虚拟显示屏VS2显示,且可以切换至第一虚拟显示屏VS1进行显示时(例如图7中的进程二),才显示屏幕切换控件C2,此时屏幕切换控件C1隐藏。
在当前管理的进程当前在第一虚拟显示屏VS1以及第二虚拟显示屏VS2显示,且可以单独切换至第一虚拟显示屏VS1或者第二虚拟显示屏VS2进行显示时(例如图7中的进程三),同时显示屏幕切换控件C1以及屏幕切换控件C2。
在当前管理的进程当前在第一虚拟显示屏VS1以及第二虚拟显示屏VS2显示,且不能单独切换至第一虚拟显示屏VS1或者第二虚拟显示屏VS2进行显示时(例如图7中的进程三),隐藏屏幕切换控件C1以及屏幕切换控件C2。
从而,通过设置屏幕切换控件C1以及C2为条件隐藏/显示,可以避免在用户进行显示切换时对用户造成干扰。
在一些实施例中,用户也可以通过设置将屏幕切换控件C1以及C2设置为一直显示或者一直隐藏。
在一个实施例中,对第二虚拟显示屏VS2的屏幕显示控制进行解释说明。
参见图5A,在第一虚拟显示屏VS1的显示页面,设置有二屏控制控件D,用户点击该二屏控制控件D,则第一虚拟显示屏VS1在原有界面的上方展示第二虚拟显示屏VS2的显示控制界面。
图8为二屏控制控件D对应的显示控制界面D0的示意图,如图8所示,该显示控制界面D0包括显示区D1、返回一屏控件D2、关闭二屏控件D3、触控区D4以及退出控件D5。
其中,显示区D1用于显示第二虚拟显示屏VS2当前运行的进程。
返回一屏控件D2用于将第二虚拟显示屏VS2显示的内容切换至第一虚拟显示屏VS1进行显示。例如,对于某一进程,若该进程的当前显示内容在第二虚拟显示屏VS2上显示,若用户点击返回一屏控件D2,则该进程切换至第一虚拟显示屏VS1进行显示,此时,第二虚拟显示屏VS2可以显示Launcher界面或者时间界面。
关闭二屏控件D3用于将第二虚拟显示屏VS2显示的内容切换至第一虚拟显示屏VS1进行显示,同时第二虚拟显示屏VS2熄屏。例如,对于某一进程,若该进程的当前显示内容在第二虚拟显示屏VS2上显示,若用户点击关闭二屏控件D3,则该进程切换至第一虚拟显示屏VS1进行显示,此时,第二虚拟显示屏VS2切换至熄屏状态,即第二虚拟显示屏VS2不显示内容。
触控区D4用于对第二虚拟显示屏VS2进行操作控制(效果类似笔记本触控板)。根据摄像头采集到的用户在触控区D4的操作,用户在触控区D4的操作所在的位置和预设位置映射关系,将用户的操作映射到第二虚拟显示屏VS2对应位置处的操作,然后根据第二虚拟显示屏VS2控件所在的位置确定执行该操作的控件。例如,用户通过触控区D4可以操控第二虚拟显示屏VS2上的屏幕指针,从而进行对应的操作。
退出控件D5用于收起显示控制界面D0。例如,用户通过点击退出控件D5,可以收起显示控制界面D0,此时,第一虚拟显示屏VS1上显示二屏控制控件D的图标。
在一个实施例中,多个智能台灯通过网络连接可以组成一个通信系统,多个智能台灯对应的多个使用用户可以通过该通信系统进行信息交互,多个使用用户可以是包含不同身份类型的用户。例如,多个使用用户可以包括第一数量的第一身份用户以及第二数量的第二身份用户等。
一些实施例中,通信系统可以是在线教学系统,多个智能台灯对应的多个使用用户具体可以是一名或多名老师、以及多名学生等。
可以理解,在使用通信系统中的多用户通信功能时,对于不同身份的用户,其对应的智能台灯的第一虚拟显示屏VS1以及第二虚拟显示屏VS2所显示的内容可以存在差别。在本申请中,在老师和学生使用在线教学系统时,老师和学生的智能台灯的投影显示内容可以不同。
在一个实施例中,对用户使用娱乐界面的场景进行解释说明,其中,用户具体可以是老师或者学生或者家长等人物。
在一些实施例中,以棋类游戏为例,用户点击娱乐界面的棋类游戏模块进入棋类游戏模式。一些实施例中,棋类游戏具体可以是五子棋,可以理解,也可以是其他棋类游戏,例如象棋、军棋等。
在一些实施例中,台灯的控制器内可存储有多个显示屏标识,用于表示台灯可投影出多个虚拟显示屏,多个显示屏标识可用一个屏幕函数来表示,示例性的,该屏幕函数可为screen={VS1,VS2},表示台灯可投影出两个虚拟显示屏,一个为VS1,另一个为VS2,VS1和VS2均为一个显示屏标识,该屏幕函数可存储于控制器的底层程序中,应用程序可调取该屏幕函数,根据该屏幕函数得到台灯的虚拟显示屏数量以及名称。
在一些实施例中,台灯的控制器内可存储一个多屏功能参数,该参数用于表示台灯可投影出多个虚拟显示屏,该参数可存储于控制器的底层程序中,应用程序可调取该参数,根据该参数得到台灯具有多个虚拟显示屏。当然,该多屏功能参数也可包括显示屏标识和全部虚拟显示屏的数量。
在一些实施例中,图5A和/或图5B中的部分应用程序或全部应用程序被配置为能够识别该多屏功能参数或屏幕函数。这些能够识别多屏功能参数或屏幕函数的应用程序可包括两套显示界面,一套显示界面用于在单屏显示模式下的显示,以适应单屏设备,如智能手机、智能电视等等,另一套显示界面用于在多屏显示模式下的显示,以适应多屏设备,如本申请实施例中的智能台灯。在单屏显示模式下,应用程序被配置为根据用户输入的操作指令生成不设置有所述显示屏标识的响应数据;在多屏显示模式下,应用程序被配置为根据用户的操作指令生成设置有一个显示屏标识的一组响应数据,或生成多组响应数据,若生成多组响应数据,每组响应数据可各设置一个显示屏标识,也可都不设置显示屏标识。
当然,这些能够识别显示屏标识或多屏功能参数的应用程序还可只包括一套显示界面,即用于多屏显示模式下的界面。智能台灯在对这些支持多屏显示的应用程序的界面进行投影时,可将这些应用程序的不同界面在不同的虚拟显示屏上进行投影。
下面以五子棋应用程序为支持多屏显示模式的应用程序,且最多只有两个界面同时显示为例,详细介绍多屏显示方法。
对于一个用户,如用户一,其通过台灯的投影功能玩棋类游戏的过程序可参见图9,图9为根据一些实施例的用户使用台灯的时序流程示意图,图9中,用户一可与台灯进行交互,台灯可与应用程序的服务器进行交互,示例性的,该应用程序可为五子棋应用程序。台灯包括红外摄像头、台灯本体、桌面投影结构和墙面投影结构,红外摄像头可为上述实施例例中的摄像头300,台灯本体可包括底座、支架和照明灯泡,上述实施例中的控制器200可设置在台灯本体的底座内,桌面投影结构可为上述实施例中的第一投影结构110,墙面投影结构可为上述实施例中的第二投影结构120。应用程序的服务器可包括游戏服务器和视频服务器,其中,游戏服务器用于实现游戏的基本功能,如人机对战、好友对战等功能,视频服务器用于实现游戏的视频聊天功能。
需要说明的是,对于一个游戏应用,其视频聊天功能可能是游戏开发者自己设计实现的,也可能是游戏开发者与第三方合作来实现的,若视频聊天功能是游戏开发者自己设计实现的,则游戏服务器和视频服务器可为一个硬件设备,也可为不同的硬件设备,若视频聊天功能是游戏开发者与第三方合作来实现的,则游戏服务器和视频服务器为不同的硬件设备。另外,除了视频聊天功能,一个游戏应用还可能有其他拓展功能,可能需要更多的服务器来实现,本申请实施例以视频聊天功能这一拓展功能作示例性介绍,其他拓展功能不再一一描述。如图9所示,用户一通过操作台灯本体上的开机键,使台灯开机后,红外摄像头可持续监测用户操作,以得到实时的操作反馈信息。在一些实施例中,台灯在开机后,桌面投影结构可在台灯所在桌面投影出图5A所示的教育界面,墙面投影结构可在墙面投影出图5C所示的墙面启动器界面。
用户一可通过滑动操作,进入图5B所示的娱乐界面。
在一些实施例中,用户一可通过在图5B所示的娱乐界面点击一个游戏图标来启动游戏,若用户一点击的游戏图标为游戏一的图标,红外摄像头可检测到该用户操作,得到操作反馈信息,将操作反馈信息发送到台灯本体的控制器内。示例性的,游戏一为五子棋应用程序。
在一些实施例中,控制器根据操作反馈信息对应的控制指令为五子棋应用程序的启动指令,则将该启动指令传输给五子棋应用程序,使五子棋应用程序根据该启动指令生成启动界面。
在一些实施例中,该五子棋应用程序在接收到控制器发送的启动指令后,可主动检测当前设备是否有多屏功能参数,若能检测到多屏功能参数,则进入多屏显示模式,若不能检测到,则进入单屏显示模式。
在一些实施例中,控制器也可根据该启动指令,主动向五子棋应用程序发送该多屏功能参数,若五子棋应用程序能识别该多屏功能参数,则进入多屏显示模式,若不能识别,则进入单屏显示模式。
以五子棋应用程序根据启动指令进入多屏显示模式为例,五子棋应用程序可生成两组界面数据。这两组界面数据可包括游戏主界面的界面数据和游戏引导界面的界面数据。其中,游戏主界面的界面数据可设置有主屏参数,游戏引导界面的界面数据可设置有副屏参数,主屏参数表示其对应的界面需要在主显示屏上进行显示,副屏显示表示其对应的界面需要在副显示屏上进行显示,对于智能台灯而言,主显示屏可为第一虚拟显示屏,也就是桌面显示屏,副显示屏可为第二虚拟显示屏,也就是墙面显示屏。因此,主屏参数可包括第一虚拟显示屏的显示屏标识,副屏参数可包括第二虚拟显示屏的显示屏标识。
在一些实施例中,控制器可根据游戏主界面的界面数据中的主屏参数,将游戏主界面的界面数据传输给桌面投影结构,使桌面投影结构在桌面上投影出图10A所示的游戏主界面;控制器可根据游戏引导界面的界面数据中的副屏参数,将戏引导页的界面数据传输给墙面投影结构,使墙面投影结构在墙面上投影出图10B所示的游戏引导界面。
参见图10A,为一种棋类游戏模式下用户智能台灯的第一虚拟显示屏VS1显示页面的示意图,如图10A所示,对于五子棋应用程序,其主界面包括多个对战入口,具体包括好友对战入口M1、人机对战入口M2、高分对战入口M3以及棋力测评入口M4。其中,好友对战入口M1用于创建好友对战房间,人机对战入口M2用于创建人机对战房间,高分对战入口M3用于创建高分对战房间,棋力测评入口M4用于创建棋力测评对战房间。
参见图10A,游戏主界面还包括其他功能控件M5,功能控件M5具体包括好友控件、排行榜控件、邮件控件、活动控件、装扮控件、设置控件等。
参见图10B,为一种棋类游戏模式下用户智能台灯的第二虚拟显示屏VS2显示页面的示意图,如图10B所示,在选择五子棋后,在开始游戏之前,智能台灯的第二虚拟显示屏VS2显示“棋逢对手,等待接入”的提示信息。
在一些实施例中,图10A中的好友对战入口M1为一个好友对战控件,用户一在图10A中点击好友对战控件后,红外摄像头可检测到该用户操作,得到操作反馈信息,将操作反馈信息发送到台灯本体的控制器内。
在一些实施例中,控制器根据操作反馈信息对应的控制指令为好友对战控件的触发指令,则将该触发指令传输给五子棋应用程序,使五子棋应用程序根据该触发指令生成响应数据。
在一些实施例中,该五子棋应用程序在接收到控制器发送的好友对战控件的触发指令后,可根据当前显示模式为多屏显示模式,根据好友对战控件的触发指令生成两组界面数据。这两组界面数据可包括创建房间界面的界面数据和游戏介绍界面的界面数据。其中,创建房间界面的界面数据可设置有主屏参数,游戏介绍界面的界面数据可设置有副屏参数。控制器可根据主屏参数,将创建房间界面的界面数据传输给桌面投影结构,使桌面投影结构在桌面上投影出图11A所示的创建房间界面;控制器可根据副屏参数,将游戏介绍界面的界面数据传输给墙面投影结构,使墙面投影结构在墙面上投影出图11B所示的游戏介绍界面。
参见图11A,用户在点击好友对战入口M1后,第一虚拟显示屏VS1进入创建房间界面。创建房间界面显示有当前用户的游戏相关信息,例如对局胜率、闯关战绩、总对局数等。此外,创建房间界面还包括邀请好友控件,用户可以通过点击邀请好友控件来邀请好友一起游戏。
参见图11B,用户一在点击好友对战入口M1后,第二虚拟显示屏VS2进入游戏介绍界面。游戏介绍界面可显示有当前游戏的相关信息,例如游戏介绍、游戏规则、游戏功能等。
在一些实施例中,创建房间界面还包括视频通话控件以及开始游戏控件。视频通话控件用于在好友接受游戏邀请并进入房间后,向该好友发起视频通话请求,以进行视频通话。开始游戏控件用于在好友接受游戏邀请并进入房间后,开始游戏对战。
在一些实施例中,创建房间界面也可以是不包含开始游戏控件,在好友接受游戏邀请并进入房间后,自动开始游戏对战。
在一些实施例中,用户一在图11A中点击邀请好友控件后,红外摄像头可检测到该用户操作,得到操作反馈信息,将操作反馈信息发送到台灯本体的控制器内。
在一些实施例中,控制器根据操作反馈信息对应的控制指令为邀请好友控件的触发指令,则将该触发指令传输给五子棋应用程序,使五子棋应用程序根据该触发指令生成响应数据。
在一些实施例中,五子棋应用程序在接收到控制器发送的邀请好友控件的触发指令后,可根据当前显示模式为多屏显示模式,根据该邀请好友控件的触发指令,生成一组界面数据。这一组响应界面数据可包括好友列表界面的界面数据。其中,好友列表界面的界面数据可设置有主屏参数。控制器可根据该主屏参数,将好友列表界面的界面数据传输给桌面投影结构,使桌面投影结构在墙面上投影出图12所示的好友列表界面。在一些实施例中,如果五子棋应用程序只生成一组界面数据,且该界面数据是需要在桌面投影结构进行投影的数据,那么该界面数据也可不包含任何一个显示屏标识,智能台灯的控制器根据界面数据没有显示屏标识,将该界面数据对应的界面在默认的显示屏,即桌面上的第一虚拟显示屏进行显示。
参见图12,好友列表界面示意图可显示用户一的各好友当前状态,用户一可以点击好友对应的邀请控件来邀请好友一起游戏。其中,当前在线的用户对应的邀请控件为可点击状态,当前离线的用户对应的邀请控件为不可点击状态。
在一些实施例中,用户一在图12中点击用户二对应的邀请控件后,红外摄像头可检测到该用户操作,得到操作反馈信息,将操作反馈信息发送到台灯本体的控制器内。
在一些实施例中,控制器根据操作反馈信息对应的控制指令为用户二对应的邀请控件的触发指令,则将该触发指令传输给五子棋应用程序,五子棋应用程序根据该触发指令,向游戏服务器发送加入游戏请求,使服务器根据加入游戏请求,向用户二的五子棋应用程序发送游戏邀请提示信息。
若用户二接受加入游戏邀请,服务器将用户二接收加入游戏邀请的消息发送给用户一的五子棋应用程序,用户一的五子棋应用程序可根据该消息生成游戏准备界面的界面数据。其中,游戏准备界面的界面数据可设置有主屏参数。控制器可根据该主屏参数,将游戏准备界面的界面数据传输给桌面投影结构,使桌面投影结构在桌面上投影出图13所示的游戏准备界面。
若用户二拒绝加入游戏邀请,服务器将用户二拒绝加入游戏邀请的消息发送给用户一的五子棋应用程序,用户一的五子棋应用程序可根据该消息生成拒绝加入游戏提示界面的界面数据。其中,该界面数据可设置有副屏参数。控制器可根据该副屏参数,将该提示界面的界面数据传输给墙面投影结构,使墙面投影结构在墙面上投影出该提示界面,以使用户一得知用户二拒绝加入游戏。
参见图13,用户二接受当前用户(用户一)的游戏邀请并进入房间,此时,用户一智能台灯的第一虚拟显示屏VS1显示用户二的游戏相关信息以及多个控件,如视频通话控件、开始游戏控件、返回控件、主页控件、进程控件和最小化控件等等。
图14为接受邀请后用户(被邀请用户)智能台灯的第一虚拟显示屏VS1显示页面的示意图,如图14所示,用户二进入房间后,第一虚拟显示屏VS1显示页面同时显示用户一以及用户二的游戏相关信息,与图13的不同之处在于,图14中用户一以及用户二的显示位置对换。在一些实施例中,用户二的第一虚拟显示屏VS1显示页面包含视频通话控件,用于向用户一发起视频通话请求。在一些实施例中,用户二的第一虚拟显示屏VS1显示页面也可包含开始游戏控件,用于向用户一发起游戏请求。
在一些实施例中,用户一在图13中可点击开始游戏控件,在开始游戏后再选择开启视频通话,或者,用户一在图13中可点击视频通话控件,在开启视频通话后再选择开始游戏。
若用户一在图13中点击了开启视频通话控件,红外摄像头可检测到该用户操作,得到操作反馈信息,将操作反馈信息发送到台灯本体的控制器内。
在一些实施例中,控制器根据操作反馈信息对应的控制指令为视频通话控件的触发指令,则将该触发指令传输给五子棋应用程序,使五子棋应用程序根据该触发指令生成响应数据。
在一些实施例中,该五子棋应用程序在接收到控制器发送的邀请好友控件的触发指令后,可根据当前显示模式为多屏显示模式,根据该视频通话控件的触发指令,生成一组界面数据,并生成视频通话请求,向服务器发送该视频通话请求。这一组响应界面数据可包括视频通话邀请界面的界面数据,该界面数据可设置有副屏参数。控制器可根据该副屏参数,将视频通话邀请界面的界面数据传输给墙面投影结构,使墙面投影结构在桌面上投影出图15所示的视频通话邀请界面。
在一些实施例中,参见图16,视频通话邀请界面还可设置有取消邀请控件,若用户点击该取消邀请控件,则控制器可控制墙面投影结构的投影画面返回至图11B所示的界面。
在一些实施例中,视频通话邀请界面可包含用户一的台灯上的摄像头采集的用户图像,即本地画面。
在一些实施例中,服务器接收到该视频通话请求后,将该视频通话请求转发给用户二的五子棋应用程序,用户二的五子棋应用程序接收到该视频通话请求后,在用户二的第一虚拟显示屏VS1显示收到视频邀请的弹窗提示消息,此时,用户二可以点击接受,从而建立与用户一的视频通话连接,同时第一虚拟显示屏VS1的弹窗提示消息消失。当然,用户二也可点击拒绝,从而拒绝与用户一建立视频通话连接,同时第一虚拟显示屏VS1的弹窗提示消息消失。
若用户二接受视频通话邀请,服务器可获取用户二的智能台灯采集的用户二的本地画面,将用户二的本地画面和用户二接受视频通话邀请的消息一并发送给用户一的五子棋应用程序,用户一的五子棋应用程序可根据该消息和用户二的本地画面生成视频聊天界面数据。其中,视频聊天界面数据可设置有副屏参数。控制器可根据该副屏参数,将游戏准备界面的界面数据传输给墙面投影结构,使墙面投影结构在墙面上投影出图17A所示的视频通话界面。
若用户二拒绝视频通话邀请,服务器将用户二拒绝加入视频通话邀请的消息发送给用户一的五子棋应用程序,用户一的五子棋应用程序可根据该消息生成拒绝加入视频通话邀请提示界面的界面数据。其中,该界面数据可设置有副屏参数。控制器可根据该副屏参数,将该提示界面的界面数据传输给墙面投影结构,使墙面投影结构在墙面上投影出该提示界面,以使用户一得知用户二拒绝加入视频通话。
在视频通话连接建立后,用户一和用户二的视频画面分别在用户一以及用户二的第二虚拟显示屏VS2上显示。参见图17A,对于用户一,用户一的视频画面可显示在用户二的视频画面的上方。对于用户二,用户二的视频画面可显示在用户一的视频画面的上方。
这样,在建立视频通话连接后,用户一的智能台灯在第一虚拟显示屏VS1展示图13所示的游戏界面的同时,在第二虚拟显示屏VS2展示图17A对端的视频界面,使用户感受接近实际面对面游戏的场景。在用户一在图13中点击开始游戏控件后,用户一和用户二开始游戏对战,此时,对战双方的第一虚拟显示屏VS1上均显示五子棋盘以及当前的下子情况。其中,用户一的第一虚拟显示屏VS1显示的界面可参见图17B。
图17B为下棋过程中用户一的智能台灯的第一虚拟显示屏VS1显示页面的示意图,如图17B所示,在下棋过程中,对战双方的第一虚拟显示屏VS1显示页面可以相同,即都包含五子棋盘N1以及功能控件N2,用户可以通过点击五子棋盘N1上纵横线的交汇处放置棋子。
功能控件N2具体包括退出对局控件、悔棋控件、重新开局控件以及退出视频控件,其中,退出对局控件用于退出当前对局,悔棋控件用于撤销前一步的下子,重新开局控件用于开始新的对局,退出视频控件用于退出视频通话。
在一些实施例中,在用户点击功能控件N2的任一控件时,弹出是否确认操作的弹窗提示消息,从而可以防止误点的情况。
在一些实施例中,若用户想结束下棋,可在图17B所示的界面上点击主页控件,红外摄像头可检测到该用户操作,得到操作反馈信息,将操作反馈信息发送到台灯本体的控制器内。
在一些实施例中,控制器根据操作反馈信息对应的控制指令为主页控件的触发指令,将根据该触发指令生成五子棋应用程序的退出指令,使五子棋应用程序根据该触发指令进行响应。
在一些实施例中,该主页控件的触发指令可为当前应用程序的退出指令,该五子棋应用程序在接收到控制器发送的主页控件的触发指令后,可在该应用程序对应的每个虚拟显示屏上分别退出该应用程序的界面,例如,在第一虚拟显示屏上退出图17B所示的界面,在第二虚拟显示屏上退出图17A所示的界面,使得第一虚拟显示屏重新显示图5B所示的界面,第二虚拟显示屏重新显示图5C所示的界面。
由上述实施例可见,本申请实施例通过在智能投影设备中存储显示屏标识,使得应用程序在需要展示多个界面时,可根据该智能投影设备具有多个显示屏标识,生成多组界面数据,使智能投影设备将这多组界面数据对应的界面在多个虚拟显示屏上分开显示,从而使得多个界面不会相互遮挡,提高了显示效果。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种智能投影设备,其特征在于,包括:
投影结构,数量为至少两个,用于投影形成虚拟显示屏,多个所述投影结构投影形成的虚拟显示屏位置不同;
摄像头,用于采集所述虚拟显示屏上的操作反馈信息,并向控制器发送所述操作反馈信息;
控制器,所述控制器内存储有每个虚拟显示屏对应的显示屏标识,所述控制器被配置为:
接收所述操作反馈信息;
获取应用程序对所述操作反馈信息的响应数据;
若所述响应数据为包含一个显示屏标识的一组界面数据,在所述显示屏标识对应的虚拟显示屏上显示所述界面数据对应的界面;
若所述响应数据为多组界面数据,分别在不同的虚拟显示屏上显示一组界面数据对应的界面。
2.根据权利要求1所述的智能投影设备,其特征在于,所述控制器还被配置为:
若所述响应数据为不包含任一个显示屏标识的一组界面数据,在默认的虚拟显示屏上显示所述界面数据对应的界面。
3.根据权利要求1所述的智能投影设备,其特征在于,所述分别在不同的虚拟显示屏上显示一组界面数据对应的界面,包括:
从每一组界面数据中分别提取显示屏标识,得到每一组界面数据对应的虚拟显示屏;
将每组界面数据对应的界面分别在各自对应的虚拟显示屏上进行显示。
4.根据权利要求1所述的智能投影设备,其特征在于,所述控制器还被配置为:
若所述响应数据为所述应用程序的退出指令,在所述应用程序对应的每个虚拟显示屏上分别退出所述应用程序的界面。
5.根据权利要求1所述的智能投影设备,其特征在于,所述获取应用程序对所述操作反馈信息的响应数据,之前还包括:
若所述操作反馈信息对应的控制指令为应用程序的启动指令,启动所述应用程序并向所述应用程序发送所述显示屏标识。
6.根据权利要求1所述的智能投影设备,其特征在于,所述控制器还被配置为:
根据用户输入的开机指令,控制至少两个虚拟显示屏显示不同的启动界面。
7.根据权利要求1所述的智能投影设备,其特征在于,所述控制器还被配置为:
根据用户输入的待机指令,控制一个虚拟显示屏显示待机界面。
8.一种多屏显示方法,用于应用程序,其特征在于,包括:
接收启动指令;
响应于所述启动指令,检测当前设备是否设置有多个显示屏标识;
若所述当前设备设置有多个显示屏标识,则进入多屏显示模式;
若所述当前设备只有一个显示屏标识,则进入单屏显示模式;
其中,在所述多屏显示模式下,所述应用程序被配置为根据用户的操作指令生成设置有一个显示屏标识的一组响应数据,或生成多组响应数据,在所述单屏显示模式下,所述应用程序被配置为根据用户输入的操作指令生成不设置有所述显示屏标识的响应数据。
9.根据权利要求8所述的多屏显示方法,其特征在于,在所述多屏显示模式下,所述应用程序生成的多组响应数据分别设置有不同的显示屏标识。
10.一种多屏显示方法,用于智能投影设备,其特征在于,包括:
接收用户输入的操作反馈信息;
获取应用程序对所述操作反馈信息的响应数据;
若所述响应数据为包含一个显示屏标识的一组界面数据,在所述显示屏标识对应的虚拟显示屏上显示所述界面数据对应的界面;
若所述响应数据为多组界面数据,分别在不同的虚拟显示屏上显示一组界面数据对应的界面。
CN202110360544.9A 2020-05-14 2021-04-02 智能投影设备及多屏显示方法 Active CN113676709B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010408081 2020-05-14
CN2020104080814 2020-05-14

Publications (2)

Publication Number Publication Date
CN113676709A true CN113676709A (zh) 2021-11-19
CN113676709B CN113676709B (zh) 2023-10-27

Family

ID=76929281

Family Applications (4)

Application Number Title Priority Date Filing Date
CN202110360544.9A Active CN113676709B (zh) 2020-05-14 2021-04-02 智能投影设备及多屏显示方法
CN202110522907.4A Active CN113178105B (zh) 2020-05-14 2021-05-13 智能显示设备及练习记录采集方法
CN202110529750.8A Active CN113194302B (zh) 2020-05-14 2021-05-14 智能显示设备及开机控制方法
CN202110528461.6A Active CN113676710B (zh) 2020-05-14 2021-05-14 智能显示设备及应用管理方法

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN202110522907.4A Active CN113178105B (zh) 2020-05-14 2021-05-13 智能显示设备及练习记录采集方法
CN202110529750.8A Active CN113194302B (zh) 2020-05-14 2021-05-14 智能显示设备及开机控制方法
CN202110528461.6A Active CN113676710B (zh) 2020-05-14 2021-05-14 智能显示设备及应用管理方法

Country Status (1)

Country Link
CN (4) CN113676709B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013071762A1 (zh) * 2011-11-15 2013-05-23 中兴通讯股份有限公司 虚拟多屏实现方法及装置
JP2014170147A (ja) * 2013-03-05 2014-09-18 Funai Electric Co Ltd プロジェクタ
CN104461001A (zh) * 2014-12-02 2015-03-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN106598161A (zh) * 2017-01-03 2017-04-26 蒲婷 一种模块化的便携式光学计算机
CN106647934A (zh) * 2016-08-04 2017-05-10 刘明涛 一种微型投影电脑
CN108874342A (zh) * 2018-06-13 2018-11-23 深圳市东向同人科技有限公司 投影视图切换方法及终端设备
CN108874341A (zh) * 2018-06-13 2018-11-23 深圳市东向同人科技有限公司 屏幕投影方法及终端设备
JP2019082649A (ja) * 2017-10-31 2019-05-30 アルプスアルパイン株式会社 映像表示システム
CN110008011A (zh) * 2019-02-28 2019-07-12 维沃移动通信有限公司 一种任务切换方法及终端设备
CN110347305A (zh) * 2019-05-30 2019-10-18 华为技术有限公司 一种vr多屏显示方法及电子设备
CN110471639A (zh) * 2019-07-23 2019-11-19 华为技术有限公司 显示方法及相关装置

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0959452A3 (de) * 1998-05-23 1999-12-22 Mannesmann VDO Aktiengesellschaft Verfahren zur Darstellung veränderlicher Informationen
US7469381B2 (en) * 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US10503342B2 (en) * 2006-08-04 2019-12-10 Apple Inc. User interface spaces
JP2007184002A (ja) * 2007-04-02 2007-07-19 Fujitsu Ltd マルチプロセス管理装置及びコンピュータ読み取り可能な記録媒体
US9292306B2 (en) * 2007-11-09 2016-03-22 Avro Computing, Inc. System, multi-tier interface and methods for management of operational structured data
US20140344765A1 (en) * 2013-05-17 2014-11-20 Barnesandnoble.Com Llc Touch Sensitive UI Pinch and Flick Techniques for Managing Active Applications
US9798355B2 (en) * 2014-12-02 2017-10-24 Lenovo (Beijing) Co., Ltd. Projection method and electronic device
KR102350382B1 (ko) * 2015-07-16 2022-01-13 삼성전자 주식회사 디스플레이장치 및 그 제어방법
US10209851B2 (en) * 2015-09-18 2019-02-19 Google Llc Management of inactive windows
CN106020796A (zh) * 2016-05-09 2016-10-12 北京小米移动软件有限公司 界面显示方法及装置
CN112363657A (zh) * 2016-10-26 2021-02-12 海信视像科技股份有限公司 手势擦除方法及装置
CN106716357B (zh) * 2016-12-29 2019-11-01 深圳前海达闼云端智能科技有限公司 多系统移动终端的控制方法、控制装置及电子设备
CN106782268B (zh) * 2017-01-04 2020-07-24 京东方科技集团股份有限公司 显示系统和用于显示面板的驱动方法
CN107132981B (zh) * 2017-03-27 2019-03-19 网易(杭州)网络有限公司 游戏画面的显示控制方法及装置、存储介质、电子设备
WO2018213451A1 (en) * 2017-05-16 2018-11-22 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
CN107197223A (zh) * 2017-06-15 2017-09-22 北京有初科技有限公司 微型投影设备和投影设备的手势控制方法
CN108111758A (zh) * 2017-12-22 2018-06-01 努比亚技术有限公司 一种拍摄预览方法、设备及计算机可读存储介质
CN108334229B (zh) * 2018-01-31 2021-12-14 广州视源电子科技股份有限公司 调整书写轨迹的方法、装置及设备、可读存储介质
CN108513070B (zh) * 2018-04-04 2020-09-04 维沃移动通信有限公司 一种图像处理方法、移动终端及计算机可读存储介质
CN108769506B (zh) * 2018-04-16 2020-04-21 Oppo广东移动通信有限公司 图像采集方法、装置、移动终端及计算机可读介质
CN108920016B (zh) * 2018-08-15 2021-12-28 京东方科技集团股份有限公司 触控显示装置、触控显示客户端以及触控信息处理装置
CN110062288A (zh) * 2019-05-21 2019-07-26 广州视源电子科技股份有限公司 应用管理方法、装置、用户终端、多媒体终端及存储介质
CN110941383B (zh) * 2019-10-11 2021-08-10 广州视源电子科技股份有限公司 双屏幕显示方法、装置、设备及存储介质
CN110908574B (zh) * 2019-12-04 2020-12-29 深圳市超时空探索科技有限公司 一种显示调节方法、装置、终端及存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013071762A1 (zh) * 2011-11-15 2013-05-23 中兴通讯股份有限公司 虚拟多屏实现方法及装置
JP2014170147A (ja) * 2013-03-05 2014-09-18 Funai Electric Co Ltd プロジェクタ
CN104461001A (zh) * 2014-12-02 2015-03-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN106647934A (zh) * 2016-08-04 2017-05-10 刘明涛 一种微型投影电脑
CN106598161A (zh) * 2017-01-03 2017-04-26 蒲婷 一种模块化的便携式光学计算机
JP2019082649A (ja) * 2017-10-31 2019-05-30 アルプスアルパイン株式会社 映像表示システム
CN108874342A (zh) * 2018-06-13 2018-11-23 深圳市东向同人科技有限公司 投影视图切换方法及终端设备
CN108874341A (zh) * 2018-06-13 2018-11-23 深圳市东向同人科技有限公司 屏幕投影方法及终端设备
CN110008011A (zh) * 2019-02-28 2019-07-12 维沃移动通信有限公司 一种任务切换方法及终端设备
CN110347305A (zh) * 2019-05-30 2019-10-18 华为技术有限公司 一种vr多屏显示方法及电子设备
CN110471639A (zh) * 2019-07-23 2019-11-19 华为技术有限公司 显示方法及相关装置

Also Published As

Publication number Publication date
CN113194302B (zh) 2022-06-21
CN113676710A (zh) 2021-11-19
CN113178105A (zh) 2021-07-27
CN113676709B (zh) 2023-10-27
CN113676710B (zh) 2024-03-29
CN113178105B (zh) 2022-05-24
CN113194302A (zh) 2021-07-30

Similar Documents

Publication Publication Date Title
US9244533B2 (en) Camera navigation for presentations
CN112866734B (zh) 一种自动展示手写输入功能的控制方法及显示设备
TWI576787B (zh) 擴增實境影像產生系統及其應用
US20140184550A1 (en) System and Method for Using Eye Gaze Information to Enhance Interactions
JP5012968B2 (ja) 会議システム
CN113596552B (zh) 显示设备及信息显示方法
Vatavu There's a world outside your TV: exploring interactions beyond the physical TV screen
CN112351302A (zh) 基于云游戏的直播交互方法、装置及存储介质
US20110256927A1 (en) Projection of interactive game environment
WO2021088892A1 (zh) 焦点切换方法、投影显示设备及系统
US11924513B2 (en) Display apparatus and method for display user interface
CN107452119A (zh) 虚拟现实实时导览方法及系统
CN112533037B (zh) 连麦合唱作品的生成方法和显示设备
CN109922352A (zh) 一种数据处理方法、装置、电子设备及可读存储介质
CN109388321B (zh) 电子白板的操作方法及装置
CN112073770B (zh) 显示设备及视频通讯数据处理方法
CN114465838B (zh) 显示设备、智能家居系统及多屏控制方法
CN103135746A (zh) 基于静态姿势和动态姿势的非接触控制方法、系统和设备
US20230368464A1 (en) Information processing system, information processing method, and information processing program
CN113676709B (zh) 智能投影设备及多屏显示方法
Ronzhin et al. Multimodal interaction with intelligent meeting room facilities from inside and outside
CN112423052A (zh) 显示系统及显示方法
CN112269553B (zh) 显示系统、显示方法及计算设备
CN114189743B (zh) 数据传输方法、装置、电子设备和存储介质
CN114356090B (zh) 一种控制方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant