CN113178105B - 智能显示设备及练习记录采集方法 - Google Patents

智能显示设备及练习记录采集方法 Download PDF

Info

Publication number
CN113178105B
CN113178105B CN202110522907.4A CN202110522907A CN113178105B CN 113178105 B CN113178105 B CN 113178105B CN 202110522907 A CN202110522907 A CN 202110522907A CN 113178105 B CN113178105 B CN 113178105B
Authority
CN
China
Prior art keywords
area
exercise
display
display picture
touch track
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110522907.4A
Other languages
English (en)
Other versions
CN113178105A (zh
Inventor
王光强
丁芳
常亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Juhaokan Technology Co Ltd
Original Assignee
Juhaokan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Juhaokan Technology Co Ltd filed Critical Juhaokan Technology Co Ltd
Publication of CN113178105A publication Critical patent/CN113178105A/zh
Application granted granted Critical
Publication of CN113178105B publication Critical patent/CN113178105B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3147Multi-projection systems
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21VFUNCTIONAL FEATURES OR DETAILS OF LIGHTING DEVICES OR SYSTEMS THEREOF; STRUCTURAL COMBINATIONS OF LIGHTING DEVICES WITH OTHER ARTICLES, NOT OTHERWISE PROVIDED FOR
    • F21V33/00Structural combinations of lighting devices with other articles, not otherwise provided for
    • F21V33/0004Personal or domestic articles
    • F21V33/0052Audio or video equipment, e.g. televisions, telephones, cameras or computers; Remote control devices therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof

Abstract

本申请提供了一种智能显示设备及练习记录采集方法,智能显示设备包括:第一成像机构,用于形成第一显示画面;第二成像机构,用于形成第二显示画面;控制器,被配置为:根据接收到的练习数据生成练习内容;在第二显示画面上全屏显示练习内容;在第一显示画面上的第一区域显示练习内容,不在第一显示画面上的第二区域显示练习内容;其中,第一区域和第二区域同时位于第一显示画面中,第一区域用于与第二显示画面同步呈现对应第一区域内输入的触控轨迹的图案,第二区域用于单独呈现对应第二区域内输入的触控轨迹的图案,对应第二区域内输入的触控轨迹图案不在第二显示画面呈现。本申请提高了智能显示设备的用户体验。

Description

智能显示设备及练习记录采集方法
本申请要求于2020年5月14日提交中国专利局、申请号为202010408081.4、发明名称为“一种智能投影设备”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请涉及投影技术领域,尤其涉及一种智能显示设备及练习记录采集方法。
背景技术
投影设备是一种可以将图像或视频投射到物体上进行显示的显示设备,与能够直接在屏幕上显示图像或视频的显示设备相比,投影设备以其投影界面尺寸大、安装灵活、能够保护视力等优点,逐渐获得了越来越多的用户喜爱。
相关技术中,一种投影设备可采集投影区域的用户操作,将用户操作在投影界面上进行显示。当投影设备投影的内容为练习题时,学生可在投影界面上进行触控作答,投影设备可将用户作答的内容发送到服务器,供老师进行批阅。
然而,用户在作答练习题时需要进行演算,若另外通过纸笔演算,则需要来回切换纸笔操作和触控操作,较为繁琐,若直接在投影界面上进行演算,则演算过程也将被保留在作答内容上,不利于老师的评阅。
发明内容
为解决用户演算的技术问题,本申请提供了一种智能显示设备及练习记录采集方法。
第一方面,本申请提供了一种智能显示设备,该智能显示设备包括:
第一成像机构,用于根据控制器的控制在第一平面上形成第一显示画面;
第二成像机构,用于根据所述控制器的控制在第二平面上形成第二显示画面;
所述控制器,分别与所述第一成像机构和所述第二成像机构通信连接,所述控制器被配置为:
根据接收到的练习数据生成练习内容;
在所述第二显示画面上全屏显示所述练习内容;
在所述第一显示画面上的第一区域显示所述练习内容,不在所述第一显示画面上的第二区域显示所述练习内容;其中,
所述第一区域和所述第二区域同时位于所述第一显示画面中,所述第一区域用于与所述第二显示画面同步呈现对应所述第一区域内输入的触控轨迹的图案,所述第二区域用于单独呈现对应所述第二区域内输入的触控轨迹的图案,对应所述第二区域内输入的触控轨迹图案不在所述第二显示画面呈现。
第二方面,本申请提供了一种智能显示设备,该智能显示设备包括:
第一成像机构,用于根据控制器的控制在第一平面上形成第一显示画面;
第二成像机构,用于根据所述控制器的控制在第二平面上形成第二显示画面;
控制器,分别与所述第一成像机构和所述第二成像机构通信连接,所述控制器被配置为:
接收用户输入的练习模式控件的触发指令;
响应于所述练习模式控件的触发指令,获取所述练习模式控件对应的练习数据;
根据所述练习数据生成练习内容;
在所述第一显示画面的第一区域显示所述练习内容,在所述第一显示画面的第二区域显示空白内容,在所述第二显示画面显示倒计时,其中,所述第一区域的面积小于所述第一显示画面的面积;
接收用户在所述第一显示画面上输入的触控轨迹;
在所述第一显示画面显示所述触控轨迹;
接收用户输入的交卷控件的触发指令;
响应于所述交卷控件的触发指令,向服务器发送所述第一区域的图像数据,不向服务器发送所述第二区域的图像数据。
第三方面,本申请提供了一种练习记录采集方法,用于智能显示设备,所述智能显示设备设置有第一显示画面和第二显示画面,该方法包括:
根据接收到的练习数据生成练习内容;
在所述第二显示画面上全屏显示所述练习内容;
在所述第一显示画面上的第一区域显示所述练习内容,不在所述第一显示画面上的第二区域显示所述练习内容;其中,
所述第一区域和所述第二区域同时位于所述第一显示画面中,所述第一区域用于与所述第二显示画面同步呈现对应所述第一区域内输入的触控轨迹的图案,所述第二区域用于单独呈现对应所述第二区域内输入的触控轨迹的图案,对应所述第二区域内输入的触控轨迹图案不在所述第二显示画面呈现。
本申请提供的智能显示设备及练习记录采集方法的有益效果包括:
本申请实施例通过在智能显示设备的一个显示画面划分为第一区域和第二区域,在第一区域上显示练习数据对应的界面,将第二区域作为草稿演算区域,从而可方便用户直接在第二区域进行演算,不需要利用纸笔进行演算,用户在第二区域进行草稿演算,不影响第一区域的作答内容的整洁;进一步的,由于作答内容和草稿内容分区存储,在上传服务器时,可只上传第一区域的作答内容,不上传第二区域的草稿内容,保护了用户隐私,提高了用户体验。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一些实施例中智能台灯的结构示意图;
图2为本申请一些实施例中虚拟显示屏形成位置的示意图;
图3为本申请一些实施例中智能台灯的另一结构示意图;
图4为本申请一些实施例中第二启动页面的示意图;
图5为本申请一些实施例中第一启动页面中的教育界面的示意图;
图6为本申请一些实施例中二屏控制控件D对应的显示控制界面D0的示意图;
图7为本申请一些实施例中练习模式的时序示意图;
图8为本申请一些实施例中第一视场角的示意图;
图9为本申请一些实施例中第二视场角的示意图。
具体实施方式
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
台灯是一种辅助人们阅读、学习和工作的照明工具,随着技术的进步,人们生活中的常见家居设备都朝着智能化的方向发展,在此浪潮下,台灯的功能也越来越丰富。在一些实施例中,台灯可设置有投影机构,能够与显示设备连接,实现投影仪的投影功能,这种台灯可称为智能台灯。
然而,传统的投影技术都是将显示设备的内容直接投影出来,如果显示设备显示的内容是叠加的内容,投影出来的画面显示的也是叠加的内容,例如,在视频聊天场景下,聊天窗口通常是叠加在原有界面的上方,这会对原有界面的内容造成遮挡,影响用户的观看体验。
为解决上述技术问题,本申请实施例通过在台灯上设置多个投影机构,使台灯成为一种智能显示设备,能够投影得到多个画面,再将应用程序的多个界面在投影出的多个画面上分开显示,从而可使多个界面不再相互遮挡。
图1为本申请一些实施例提供的智能台灯的结构示意图,如图1所示,该智能台灯包括:至少两个成像机构、控制器200以及摄像头300。成像机构可为投影机构,控制器200分别与至少两个投影机构以及摄像头300连接,从而,控制器200可以对至少两个投影机构的工作状态进行控制,以及获取摄像头300所拍摄的内容。
在一些实施例中,智能台灯还包括底座、支架和照明灯泡,照明灯、投影机构和摄像头都可设置在支架上,支架可设置在底座上,控制器200可设置在底座内部。
在一些实施例中,智能台灯中的控制器200具备网络通信功能,从而可使得当前的智能台灯可以和其他智能台灯、智能终端(例如手机)或者服务器(例如网络平台)进行通信,从而获取投影内容。
在一些实施例中,智能台灯中的控制器200还可安装有操作系统,从而不需要与显示设备连接就能进行投影,当然,安装有操作系统的智能台灯也可具有网络通信功能,从而能够与服务器等设备进行通信,以实现一些网络功能,如升级操作系统、安装应用程序、与其他智能台灯互动等等。参见图1,至少两个投影机构至少包括第一成像机构110以及第二成像机构120,第一成像机构110也可称为桌面投影机构,用于投影形成第一虚拟显示屏VS1;第二成像机构120也可称为墙面投影机构,用于投影形成第二虚拟显示屏VS2,第一虚拟显示屏VS1与第二虚拟显示屏VS2的形成位置不同。
例如,图2为本申请一些实施例中虚拟显示屏形成位置的示意图,如图2所示,第一成像机构110投影形成的第一虚拟显示屏VS1可以是形成于设置智能台灯的桌子的桌面上,该桌面可为水平的第一平面,第一虚拟显示屏VS1显示的画面可称为第一显示画面;第二成像机构120投影形成的第二虚拟显示屏VS2可以是形成于桌子所靠的墙面上,该墙面可为竖直的第二平面,第二虚拟显示屏VS2显示的画面可称为第二显示画面。可以理解,在实际应用中,虚拟显示屏的形成位置可以根据实际需要进行调整,桌面可以为大致水平的平面,墙面可以为大致竖直的平面。
可以理解,第一虚拟显示屏VS1的具体显示内容可以和第二虚拟显示屏VS2的具体显示内容不同,从而,两个虚拟显示屏相互配合,以起到对容量大、复杂度高的内容进行全面显示的目的。
在至少两个投影机构分别投影形成至少两个虚拟显示屏后,摄像头300用于采集至少一个虚拟显示屏上的操作手势,并将操作手势发送至控制器200,该操作手势具体可以是用户对虚拟显示屏上的显示内容的操作点击信息等。
例如,摄像头300可以是只采集第一虚拟显示屏VS1上的操作手势,也可以是只采集第二虚拟显示屏VS2上的操作手势,也可以是同时采集第一虚拟显示屏VS1以及第二虚拟显示屏VS2上的操作手势,也可以是只采集第一虚拟显示屏VS1上的局部区域的操作手势。
另外,基于需要采集操作手势的虚拟显示屏的数量,可以设置摄像头300的数量为多个,即单个摄像头采集单个虚拟显示屏的操作手势。
在一些实施例中,摄像头300可为红外摄像头,从而可利用红外检测技术,在夜晚、阴天等光线不好的场景下,也能保障获取的操作手势的准确性。
在一些实施例中,摄像头300除了采集操作手势,还可采集用户图像,以实现视频通话、拍照等功能。
在至少两个投影机构分别投影形成至少两个虚拟显示屏后,控制器200用于控制至少两个投影机构分别在至少两个虚拟显示屏上的投影内容,以及,在接收到摄像头300发送的操作手势后,基于至少一个虚拟显示屏上的操作手势对至少两个投影机构的投影内容进行调整。
例如,控制器200可以是基于操作手势只对第一成像机构110在第一虚拟显示屏VS1上的投影内容进行调整,也可以是基于操作手势只对第二成像机构120在第二虚拟显示屏VS2上的投影内容进行调整,还可以是基于操作手势同时对第一成像机构110在第一虚拟显示屏VS1上的投影内容、以及第二成像机构120在第二虚拟显示屏VS2上的投影内容进行调整。
可以理解,两个投影机构仅为本申请中智能台灯进行多屏投影的一种示例性说明,至少两个投影机构还可以是其他数量的投影机构,例如,3个或者大于3个等,本申请对智能台灯的投影机构的数量不做具体限定。另外,为了便于解释说明,本申请各实施例均以两个投影机构为例,对本申请的技术方案进行解释说明。
在一些实施例中,本申请中,控制器200的数量可以是多个,具体可以是和投影机构的数量相同,从而,可以设置单个控制器控制单个投影机构的投影内容,且各个控制器之间存在通信连接。
例如,对于至少两个投影机构至少包括第一成像机构110以及第二成像机构120的情况,控制器200具体可以是包括第一控制器以及第二控制器,其中,第一控制器控制第一成像机构110的投影内容,第二控制器控制第二成像机构120的投影内容,且第一控制器和第二控制器存在通信连接。
在一些实施例中,多个控制器可以是集中设置,即多个控制器设置于智能台灯中的同一指定位置;也可以是分开设置,即控制器分别与对应的投影机构相对应设置等,本申请对多个控制器的设置位置不做限定。
一些实施例提供一种智能台灯,该智能台灯包括至少两个投影机构,即本申请属于多屏投影的智能台灯,并且,每个投影机构投影形成的虚拟显示屏的形成位置不同,从而可以在不同位置形成多个虚拟显示屏,通过多个虚拟显示屏配合显示,以起到全面显示容量大、复杂度高的显示内容的目的。同时,通过摄像头获取虚拟显示屏上的操作手势,并根据操作手势对投影内容进行调整,从而可以进一步增强不同用户之间的互动性。
图3为本申请一些实施例提供的智能台灯的另一结构示意图,如图3所示,第一成像机构110包括:第一光源112、第一成像单元114以及第一镜头116;其中,第一光源112用于发光,第一成像单元114用于基于第一光源112发出的光形成图案,第一光源112以及第一成像单元114用于配合形成第一投影图案;第一镜头116用于对第一投影图案进行放大,从而,第一光源112、第一成像单元114以及第一镜头116配合工作以在第一成像机构110对应的第一虚拟显示屏VS1上显示对应的显示内容。在一些实施例中,第一光源112包括三色光源、白光光源以及蓝光光轮光源中的至少一种。其中,三色光源以及蓝光光轮光源用于发出不同颜色的光,以使得在第一虚拟显示屏VS1上可以显示彩色的内容。白光光源用于发出白光,以实现基本的台灯照明功能。
在一些实施例中,第一光源112可以只包括白光光源,从而可以实现基本的照明功能。第一光源112可以只包括三色光源或只包括蓝光光轮光源,从而可以在需要进行投影时,在第一虚拟显示屏VS1上显示彩色内容。第一光源112可以同时包含白光光源以及三色光源,或者,同时包含白光光源以及蓝光光轮光源,或者,同时包含白光光源、三色光源以及蓝光光轮光源,从而在实现基本照明功能的同时,也可以在第一虚拟显示屏VS1上显示彩色内容。
参见图3,第二成像机构120包括:第二光源122、第二成像单元124以及第二镜头126;其中,第二光源122用于发光,第二成像单元124用于基于第二光源122发出的光形成图案,第二光源122以及第二成像单元124用于配合形成第二投影图案;第二镜头126用于对第二投影图案进行放大,从而,第二光源122、第二成像单元124以及第二镜头126配合工作以在第二成像机构120对应的第二虚拟显示屏VS2上显示对应的显示内容。
在一些实施例中,第二光源122包括三色光源、白光光源以及蓝光光轮光源中的至少一种。其中,三色光源以及蓝光光轮光源用于发出不同颜色的光,以使得在第二虚拟显示屏VS2上可以显示彩色的内容。白光光源用于发出白光,以实现基本的台灯照明功能。
在一些实施例中,第二光源122可以只包括白光光源,从而可以实现基本的照明功能。第二光源122可以只包括三色光源或只包括蓝光光轮光源,从而可以在需要进行投影时,在第二虚拟显示屏VS2上显示彩色内容。第二光源122可以同时包含白光光源以及三色光源,或者,同时包含白光光源以及蓝光光轮光源,或者,同时包含白光光源、三色光源以及蓝光光轮光源,从而在实现基本照明功能的同时,也可以在第二虚拟显示屏VS2上显示彩色内容。
在一些实施例中,投影机构中的镜头为焦距可调镜头,控制器200可以通过调整镜头的焦距对投影图像的大小进行调整。
在一些实施例中,第一光源112和第二光源122可以是不同的光源分别为不同的成像单元提供光束,也可以是同一个光源通过分光为不同的成像单元提供光束。
在一个实施例中,智能台灯可以包括以下一个或多个组件:存储组件,电源组件,音频组件以及通信组件。
存储组件被配置为存储各种类型的数据以支持在智能台灯的操作。这些数据的示例包括用于在智能台灯上投影显示的学生习题、考试试卷、电子课本、习题分析与讲解等,数据的类型具体包括文档、图片、音频以及视频等。存储组件可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件为智能台灯的各种组件提供电力。电源组件可以包括电源管理系统,一个或多个电源,及其他与为智能台灯生成、管理和分配电力相关联的组件。
音频组件被配置为输出和/或输入音频信号。例如,音频组件包括一个麦克风(MIC),当智能台灯处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储组件或经由通信组件发送。在一些实施例中,音频组件还包括一个扬声器,用于输出音频信号。
通信组件被配置为便于智能台灯和其他设备之间有线或无线方式的通信。智能台灯可以接入基于通信标准的无线网络,如WiFi、4G或5G等,或它们的组合。在一个示例性实施例中,通信组件经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在一个实施例中,对摄像头300采集操作手势的原理进行解释说明。
实际的成像界面可以成为虚拟显示屏,在一些实施例中虚拟显示屏可以是呈现投影图像的桌面,墙面,专用的投影屏幕等其他表面结构,用户在虚拟显示屏的操作是通过摄像头采集的图像或受控的位置传感设备传递的位置信息识别出来的。
示例性的一些操作获取方式如下:
(一)运动轨迹
在控制器200控制投影机构在虚拟显示屏上投影后,摄像头300实时拍摄用户手指在虚拟显示屏上的影像,并将影像发送至控制器200。控制器200通过指尖追踪技术对影像中用户指尖进行识别,从而,基于指尖的运动轨迹即可得到用户在虚拟显示屏上的操作轨迹。
在一些实施例中,在摄像头300获取的影像中,若只包含单个手指,则基于该手指的指尖确定用户的操作轨迹;若包含多个手指,则基于特定手指的指尖确定用户的操作轨迹,特定手指例如可以是食指等,或者确定多个指尖的轨迹。
(二)点击操作
智能台灯的摄像头300设置于用户手指上方,在用户进行手指下压点击的操作时,用户指尖图像会发生一定的变化,控制器200可以根据指尖图像的变化来识别用户是否进行了点击操作。
例如,在摄像头300位置固定的情况下,在用户进行手指下压点击的操作时,指尖与摄像头300之间的距离会发生变化,在摄像头300获取的影像中,手指下压点击之前的指尖图案尺寸大于手指下压点击之后的指尖图案尺寸,从而,在指尖图案的尺寸发生变化时,可以认为用户进行了下压点击操作。
又例如,部分用户在进行点击时,会存在指尖下弯的情况,导致影像中出现指尖图案发生形变或者不完整的情况,从而,在指尖图案发生形变或者显示不完整时,可以认为用户进行了下压点击操作。
可以理解,在指尖图像刚发生变化时,可以认为用户处于指尖按下状态;在指尖图像恢复原状后,可以认为用户处于指尖抬起状态,从而,用户指尖图像发生一次变化,可以认为用户进行了一次有效的点击操作。
(三)单击操作
在控制器200确认用户处于指尖按下的状态时,记录该状态的位置点Point1的位置坐标以及时间戳。
在确认用户处于指尖抬起的状态时,记录该状态的位置点Point2的位置坐标以及时间戳。
如果位置点Point1的位置坐标与位置点Point2的位置坐标之间的距离小于预设阈值,且位置点Point1的时间戳与位置点Point2的时间戳之间的时间差小于预设阈值,则认为用户在位置点Point1(同Point2)发生了单击操作。
(四)双击操作
在控制器200确认用户进行了第一次有效点击操作时,记录该点击操作的位置点Point3的位置坐标以及时间戳。
在确认用户进行了第二次有效点击操作时,记录该点击操作的位置点Point4的位置坐标以及时间戳。
如果位置点Point3的位置坐标与位置点Point4的位置坐标之间的距离小于预设阈值,且位置点Point3的时间戳与位置点Point4的时间戳之间的时间差小于预设阈值,则认为用户在位置点Point3、Point4进行的点击操作构成一次有效的双击操作。
可以理解,多次点击操作的识别原理与双击操作类似,在此不再赘述。
(五)长按操作
在控制器200确认用户处于指尖按下的状态时,记录该状态的位置点Point5的位置坐标以及时间戳。
在确认用户处于指尖抬起的状态时,记录该状态的位置点Point6的位置坐标以及时间戳。
如果位置点Point5的位置坐标与位置点Point6的位置坐标之间的距离小于预设阈值,且位置点Point5的时间戳与位置点Point6的时间戳之间的时间差大于预设阈值,则认为用户在位置点Point5(同Point6)发生了长按操作。
(六)滑动操作
在控制器200确认用户处于指尖按下的状态时,记录该状态的位置点Point7的位置坐标以及时间戳。
在确认用户处于指尖抬起的状态时,记录该状态的位置点Point8的位置坐标以及时间戳。
如果位置点Point7的位置坐标与位置点Point8的位置坐标之间的距离大于预设阈值,且位置点Point7的时间戳与位置点Point8的时间戳之间的时间差大于预设阈值,则认为用户在位置点Point7至Point8之间发生了滑动操作。
可以理解,滑动操作可以是侧向滑动,如向左滑动或向右滑动,也可以是纵向滑动,如向上滑动或向下滑动,也可以是斜向滑动,如向左上滑动或向右下滑动等。
在一些实施例中,可以基于位置点Point7与Point8的位置坐标确定滑动距离以及滑动方向(默认位置坐标系中向右为X轴正方向,向上为Y轴正方向)。
例如,滑动距离可以通过以下公式计算:
Figure GDA0003590004410000071
其中,dis为滑动距离,x7、y7为位置点Point7的位置坐标,x8、y8为位置点Point8的位置坐标。
在x7=x8,或者x7与x8的差值小于预设阈值时,若y7>y8,则滑动方向为向下滑;若y7<y8,则滑动方向为向上滑。
在y7=y8,或者y7与y8的差值小于预设阈值时,若x7>x8,则滑动方向为向坐滑;若x7<x8,则滑动方向为向右滑。
在x7>x8时,若y7>y8,则滑动方向为向左下方滑;若y7<y8,则滑动方向为向左上方滑。
在x7<x8时,若y7>y8,则滑动方向为向右下方滑;若y7<y8,则滑动方向为向右上方滑。
在一个实施例中,也可以是通过其他外设来模拟用户在虚拟显示屏上的操作。外设具体例如感应笔等。
在一些实施例中,感应笔的笔尖设置有位置传感器,位置传感器实时将笔尖的位置发送至智能台灯的控制器200,从而,智能台灯通过控制器200发送的位置变化情况获取用户在虚拟显示屏上的操作轨迹。
另外,感应笔的笔尖设置有按压感应结构(例如压力传感器等),当用户需要进行点击操作时,用户可以使用感应笔触碰桌面,从而按压感应结构获取按压信号,并将获取的按压信号发送至智能台灯的控制器200,控制器200基于笔记的当前位置以及按压信号,即可确定用户进行点击的位置。
可以理解,用户通过感应笔进行其他操作(例如双击、长按等)的原理与通过指尖进行操作的原理相同,在此不再赘述。
为了便于理解,以下各实施例中,均以智能台灯包含单个控制器200、两个投影机构(第一成像机构110以及第二成像机构120)、单个摄像头300为例进行阐述,其中,摄像头300只采集第一虚拟显示屏VS1上的操作手势,第一成像机构110投影形成的第一虚拟显示屏VS1形成于设置智能台灯的桌子的桌面上,第二成像机构120投影形成的第二虚拟显示屏VS2形成于桌子所靠的墙面上。
在一个实施例中,对智能台灯的开机进行解释说明。
在一些实施例中,智能台灯的底座上设置有开机键。该开机键具体可以是物理按压式结构或者是触控结构,当开机键为物理按压式结构时,若用户按压该开机键,则可以认为开机键处于活跃状态;当开机键为触控结构时,若用户的肢体部位(例如手指)放置于该开机键表面,则可以认为开机键处于活跃状态。
在一些实施例中,开机键处于活跃状态是指开机键接受到按压的状态。
传统的台灯通常也设置有开机键,在用户按压或触控开机键后,台灯的光源会通电发光,从而实现照明功能。与传统的台灯相比,智能台灯还设置有多个虚拟显示屏,在开机后,除了能实现照明功能,虚拟显示屏可展示预设的投影画面,从而实现显示功能。
在一些实施例中,智能台灯除了设置有开机键,还可设置有投影键,在开机时,虚拟显示屏可先不展示投影画面,从而智能台灯在开启后可被当做普通台灯来使用,在用户需要进行投影显示时,用户可按压或触控投影键,使虚拟显示屏显示投影画面,用户再次按压或触控投影键,虚拟显示屏可关闭投影画面的显示,从而实现节约能源的效果。
在一些实施例中,上述投影键的功能也可集成到开机键上来实现,例如,开机键被配置为用户长按时进行开机或关机,用户点击时开启投影或关闭投影。
在一些实施例中,用户触发开机键后,控制器获取开机键的触发信号,然后根据该触发信号生成第一启动页面和第二启动页面,然后控制桌面投影机构对第一启动页面进行投影,控制墙面投影机构对第二启动页面进行投影,并开启摄像头,从而通过摄像头监测用户在第二启动页面和/或第一启动页面上的操作。
参加图4,为根据一些实施例的第二启动页面的界面示意图,如图4所示,第二启动页面可不设置控件,仅展示一些无需用户长时间关注的信息,如天气信息、时间信息等等。当然,在一些实施例中,第一启动页面也可设置少量的控件,例如,图4中的“天气晴”可为一个界面控件,用户点击该控件,可进入天气详情界面。
参见图5,为根据一些实施例的第一启动页面的界面示意图,第一启动页面可包括教育界面,如图5所示,教育界面可设置有多个控件,如“在线教学系统”、“教学频道”、“习题练习”、“模拟考试”、“作业批改”,每个控件均为一个显示位,用户点击一个控件后,可进入该控件对应的界面。第一启动页面上可设置有一个二屏控制控件D,该控件D被配置为响应于触发时在当前界面上调出用于操作墙面投影界面的控制界面。
在一些实施例中,用户可能不方便直接操作第二启动页面上的控件,用户可在图5所示的第一启动页面中点击D控件,从而在第一虚拟显示屏上调出第二启动页面的控制界面,在该控制界面上对第二启动页面进行操作。
在一个实施例中,对第二虚拟显示屏VS2的屏幕显示控制进行解释说明。
参见图5,在第一虚拟显示屏VS1的显示页面,设置有二屏控制控件D,用户点击该二屏控制控件D,则第一虚拟显示屏VS1在原有界面的上方展示第二虚拟显示屏VS2的显示控制界面。
图6为二屏控制控件D对应的显示控制界面D0的示意图,如图6所示,该显示控制界面D0包括显示区D1、返回一屏控件D2、关闭二屏控件D3、触控区D4以及退出控件D5。
其中,显示区D1用于显示第二虚拟显示屏VS2当前运行的进程。
返回一屏控件D2用于将第二虚拟显示屏VS2显示的内容切换至第一虚拟显示屏VS1进行显示。例如,对于某一进程,若该进程的当前显示内容在第二虚拟显示屏VS2上显示,若用户点击返回一屏控件D2,则该进程切换至第一虚拟显示屏VS1进行显示,此时,第二虚拟显示屏VS2可以显示Launcher界面或者时间界面。
关闭二屏控件D3用于将第二虚拟显示屏VS2显示的内容切换至第一虚拟显示屏VS1进行显示,同时第二虚拟显示屏VS2熄屏。例如,对于某一进程,若该进程的当前显示内容在第二虚拟显示屏VS2上显示,若用户点击关闭二屏控件D3,则该进程切换至第一虚拟显示屏VS1进行显示,此时,第二虚拟显示屏VS2切换至熄屏状态,即第二虚拟显示屏VS2不显示内容。
触控区D4用于对第二虚拟显示屏VS2进行操作控制(效果类似笔记本触控板)。根据摄像头采集到的用户在触控区D4的操作,用户在触控区D4的操作所在的位置和预设位置映射关系,将用户的操作映射到第二虚拟显示屏VS2对应位置处的操作,然后根据第二虚拟显示屏VS2控件所在的位置确定执行该操作的控件。例如,用户通过触控区D4可以操控第二虚拟显示屏VS2上的屏幕指针,从而进行对应的操作。
退出控件D5用于收起显示控制界面D0。例如,用户通过点击退出控件D5,可以收起显示控制界面D0,此时,第一虚拟显示屏VS1上显示二屏控制控件D的图标。
在一个实施例中,多个智能台灯通过网络连接可以组成一个通信系统,多个智能台灯对应的多个使用用户可以通过该通信系统进行信息交互,多个使用用户可以是包含不同身份类型的用户。例如,多个使用用户可以包括第一数量的第一身份用户以及第二数量的第二身份用户等。
一些实施例中,通信系统可以是在线教学系统,多个智能台灯对应的多个使用用户具体可以是一名或多名老师、以及多名学生等。
可以理解,在使用通信系统中的多用户通信功能时,对于不同身份的用户,其对应的智能台灯的第一虚拟显示屏VS1以及第二虚拟显示屏VS2所显示的内容可以存在差别。在本申请中,在老师和学生使用在线教学系统时,老师和学生的智能台灯的投影显示内容可以不同。
在一些实施例中,对用户通过智能显示设备进行习题练习的过程进行说明。
参见图7,为根据一些实施例的进行习题练习的时序图,如图7所示,若在进行习题练习之前,智能台灯为关机状态,用户可将智能台灯进行开机。
在一些实施例中,在智能台灯开机后,在第一虚拟显示屏VS1上显示图5所示的界面,在第二虚拟显示屏VS2上显示图4所示的界面。
在一些实施例中,在智能台灯开机后,参见图8,摄像头的视场角为第一视场角α,使得摄像头的采集范围可覆盖整个第一虚拟显示屏VS1,示例性的,α可为120度。
在一些实施例中,在图5所示的第一启动界面,用户可点击“习题练习”控件,以触发该控件,该控件也可称为练习模式控件。智能台灯可被控制为响应于该“习题练习”控件这一特定控件被触发,进入练习模式。
在一些实施例中,除了在图5所示的界面触发练习模式控件进入练习模式,还可通过其他方式进入练习模式。例如,在一个设置有练习题控件和非练习题控件的界面,练习题控件可设置有练习标识,非练习题控件,如食品类控件、游戏类控件、课本类控件等未设置有该练习标识,智能台灯可根据被用户触发的控件设置有练习标识,进入练习模式。
在一些实施例中,相同的页面数据在练习模式下时,仅显示在第一虚拟显示屏VS1的第一显示区域,此时还需要显示用于作为草稿区的第二区域;在非练习模式下会在第一虚拟显示屏VS1全屏显示。
在一些实施例中,智能台灯在进入练习模式后,可向服务器发送练习数据请求,以使服务器根据该练习数据请求向智能台灯反馈练习数据。
在一些实施例中,智能台灯在进入练习模式后,还将第一虚拟显示屏VS1划分为第一区域和第二区域,如图8和图9所示,第一区域可为习题展示区VS1_1,第二区域可为草稿区VS1_2。示例性的,习题展示区VS1_1可位于第一虚拟显示屏VS1中的左侧,草稿区VS1_2可位于第一虚拟显示屏VS1中的右侧,习题展示区VS1_1的面积可大于草稿区VS1_2的面积。当然,用户可对习题展示区VS1_1和草稿区VS1_2的相对位置和尺寸进行调整,例如,将习题展示区VS1_1调整至左侧,将习题展示区VS1_1调整至右侧,将习题展示区VS1_1和草稿区VS1_2调整为两个面积相同的区域等等。
为了便于用户区分习题展示区VS1_1和草稿区VS1_2,在一些实施例中,智能台灯可在习题展示区VS1_1和草稿区VS1_2的边界处显示边界线;在一些实施例中,智能台灯还可将习题展示区VS1_1和草稿区VS1_2设置不同的背景色;在一些实施例中,智能台灯还可在草稿区VS1_2显示提示词,提示用户该区域为草稿区。当然,智能台灯还可组合上述多种方式,或通过其他方式使用户能够区分习题展示区VS1_1和草稿区VS1_2。
在一些实施例中,智能台灯在进入练习模式后,还可调整摄像头的视场角,使摄像头的的采集范围由覆盖整个第一虚拟显示屏VS1缩小到只覆盖习题展示区VS1_1,不再覆盖草稿区VS1_2。例如,将视场角由图8中的α缩小为图9中的第二视场角β,示例性的,β可为90度。当然,α和β也可为其他角度,或者还可由用户自定义设置。
在一些实施例中,智能台灯可通过软件方式实现摄像头视场角的调整。例如,通过调整摄像头的焦距,可对摄像头的视场角进行调整。
在一些实施例中,智能台灯可通过硬件方式实现摄像头视场角的调整。例如,摄像头可为双目摄像头,包括一颗普通视角摄像头和一颗广角摄像头,其中,普通视角摄像头是相对广角摄像头而言,视场角小于广角摄像头的摄像头。在进入练习模式之前,可通过广角摄像头拍摄整个第一虚拟显示屏VS1上的用户操作,在进入练习模式之后,可通过普通视角摄像头只拍摄习题展示区VS1_1上的用户操作。
为实现摄像头的视场角覆盖习题展示区VS1_1,不覆盖草稿区VS1_2,在一些实施例中,还可通过转动摄像头的方式来实现上述效果。摄像头可设置有云台,或安装在一个云台上,以实现视场角的转动。在进入练习模式之前,摄像头可如图8所示,视场角覆盖整个第一虚拟显示屏VS1;在接收到练习模式控件或练习题控件的触发指令后,智能台灯可将摄像头朝向左侧转动一定角度,使摄像头能拍摄到的右侧边界由草稿区VS1_2的右侧边界变为习题展示区VS1_1的右侧边界,而摄像头能拍摄到的左侧边界由习题展示区VS1_1的左侧边界变为该习题展示区VS1_1的左侧边界左侧的某个位置,即实现了拍摄范围的向左平移。
在一些实施例中,由于用户可能更改了习题展示区VS1_1和草稿区VS1_2的相对位置,或者调整了习题展示区VS1_1和草稿区VS1_2的大小,因此,在接收到练习模式控件或练习题控件的触发指令后,智能台灯可获取当前的习题展示区VS1_1的坐标位置和草稿区VS1_2的坐标位置,根据这两个区域的坐标位置,确定如何调整摄像头的拍摄范围。
在一些实施例中,智能台灯也可在接收到练习数据之前,先不调整摄像头的拍摄范围,而是在接收到服务器发送的练习数据后,根据练习数据生成练习内容,根据练习内容的尺寸比例和习题展示区VS1_1预设的尺寸比例,确定在本次练习模式下的习题展示区VS1_1的坐标位置和草稿区VS1_2的坐标位置。
例如,若练习内容的尺寸比例为16:9,习题展示区VS1_1预设的尺寸比例也为16:9,此时,可采用预设的习题展示区VS1_1的坐标位置和草稿区VS1_2的坐标位置将第一虚拟显示屏VS划分两个区域,并据此调整摄像头的拍摄范围,使摄像头的拍摄范围覆盖习题展示区VS1_1,不覆盖草稿区VS1_2。
若练习内容的尺寸比例为9:16,习题展示区VS1_1预设的尺寸比例为16:9,此时,可不采用预设的习题展示区VS1_1的坐标位置和草稿区VS1_2的坐标位置,而是根据第一虚拟显示屏VS1的中轴线,将第一虚拟显示屏VS1划分为面积相同的习题展示区VS1_1和草稿区VS1_2。然后转动调整摄像头,使摄像头的拍摄范围覆盖习题展示区VS1_1,不覆盖草稿区VS1_2。
在一些实施例中,智能台灯可根据接收到的练习数据生成练习内容,然后在调整好摄像头后,可进行练习内容的投影。
在一些实施例中,第二虚拟显示屏VS2的面积大于第一虚拟显示屏VS1的面积,第一虚拟显示屏VS1的面积大于习题展示区VS1_1的面积。智能台灯在生成练习内容后,可根据习题展示区VS1_1的尺寸和练习内容的尺寸确定第一缩放系数,将练习内容按照第一缩放系数进行缩放,得到左侧为缩放后的练习内容、右侧为空白内容的第一图像,第一图像可设置有VS1标识。智能台灯在生成练习内容后,可根据第二虚拟显示屏VS2的尺寸和练习内容的尺寸确定第二缩放系数,将练习内容按照第二缩放系数进行缩放,得到第二界面,练习内容在第二界面上全屏显示,第二界面可设置有VS2标识。控制器可根据VS1标识,将第一界面在第一虚拟显示屏VS1进行显示,使用户只在习题展示区VS1_1看到练习内容,在草稿区VS1_2看到的为空白界面。控制器可根据VS2标识,将第二界面在第二虚拟显示屏VS2进行显示,使用户在第二虚拟显示屏VS2上看到全屏显示的练习内容。
为较好的呈现练习内容,习题展示区VS1_1在第一虚拟显示屏VS1的面积可能相对较大,草稿区VS1_2在第一虚拟显示屏VS1的面积可能相对较小,导致草稿区VS1_2不能满足用户的演算需求,为解决此问题,在一些实施例中,智能台灯还可将草稿区VS1_2配置为可进行翻页,翻页方式可设置为左后滑动翻页或上下滑动翻页或通过翻页控件翻页等方式。
在一些实施例中,智能台灯在生成练习内容后,还可生成一个时间提示界面。示例性的,该时间提示界面可显示一个计时器,用于提示用户做练习题已经花费的时间;或者,该时间提示界面可显示一个倒计时,用于提示用户做这些练习题的剩余时间,该倒计时的总时间可从练习数据中得到,例如,根据练习数据包括一张试卷的界面数据,可从该界面数据中获取“考试时间”等相关字样,或者,练习数据中设置有一个可被智能台灯识别的交卷时间参数,智能台灯根据该“考试时间”、“考试时长”等相关关键字或交卷时间参数得到用户作答该试卷的最长允许时间,然后生成一个时间为该最长允许时间的倒计时进程,进而根据该倒计时进程生成一个倒计时。智能台灯可将练习内容在第一虚拟显示屏VS1的习题展示区VS1_1上进行投影展示,将时间提示界面在第二虚拟显示屏VS2上展示。
在一些实施例中,智能台灯还可在习题展示区VS1_1上设置一个时间控件,该时间控件可浮层展示在练习内容的上方,以显示用户做练习题已经花费的时间或考试时间的倒计时。
在一些实施例中,练习内容可包括一个交卷控件,该交卷控件的数据可由服务器设置在练习数据中,使得智能台灯生成的练习内容中包含该交卷控件。
在第一虚拟显示屏VS1的习题展示区VS1_1展示练习内容后,用户可以开始作答。在一些实施例中,对于练习内容中的题目,用户可先在草稿区VS1_2进行演算,在演算出答案后,再将答案写入到习题展示区VS1_1的题目规定的位置。
在一些实施例中,在进入练习模式之后,用户可通过红外笔在草稿区VS1_2进行演算以及在习题展示区VS1_1进行作答。智能台灯可设置有红外探测器,红外探测器与红外笔通信连接,可获取红外笔发出的红外光。红外探测器可根据该红外光的移动轨迹,得到红外笔的移动轨迹,将红外笔的移动轨迹,红外笔的移动轨迹的探测可通过现有技术实现,本申请不再赘述。红外探测器可将红外笔的移动轨迹发送到智能台灯的控制器,控制器将其作为用户在第一平面上输入的触控轨迹。
在一些实施例中,控制器可根据触控轨迹确定图案。若触控轨迹在第一区域,控制器可在第一显示画面的当前图像的上方叠加包含图案的图层,得到第一图像,然后控制第一成像机构将第一显示画面刷新为显示该第一图像,从而用户可在第一显示画面上看到习题展示区VS1_1上生成了用户通过红外笔在第一区域画出的图案;控制器还可在第一图像中裁切掉对应第二区域的部分,生成待显示图像,并控制第二成像机构将第二显示画面刷新为显示该待显示图像,从而用户可在第二显示画面上看到用户通过红外笔通过红外笔在第一区域画出的图案。
若触控轨迹在第二区域,控制器可在第一显示画面的当前图像的上方叠加包含图案的图层,得到第二图像,然后控制第一成像机构将第一显示画面刷新为显示该第二图像,从而用户可在第一显示画面上看到草稿区VS1_2上生成了用户通过红外笔画出的图案。控制器可根据触控轨迹在第二区域,不刷新第二显示画面,从而使用户在进行草稿演算时无需关注第二显示画面。当然,控制器也可通过上述裁剪的方法,将第二图像裁剪后发送至第二显示画面进行显示,但由于触控轨迹对应的图案在第二区域,因此,第二显示画面的显示内容将不会发生变化。
在一些实施例中,控制器在根据第一图像刷新第一显示画面后,也可通过摄像头采集第一图像中的习题展示区VS1_1的图像,然后将摄像头采集的图像在第二显示画面上全屏显示,使第二显示画面的显示内容与第一显示画面的习题展示区VS1_1的显示内容保持一致。
在一些实施例中,第二显示画面无需和第一显示画面同步显示对应练习数据的内容,第一区域的触控轨迹也因此无需同步到第二显示画面进行显示。
在一些实施例中,第一显示画面上第一区域的触控轨迹会被同步到服务器或一个通信连接的对端设备进行对应图案的处理或显示。但第二区域充的触控轨迹不被同步到显示器或对端设备。
在一些实施例中,用户在将习题的答案写在习题展示区VS1_1处后,若用户发现答案写错,可以在习题展示区VS1_1需要更改答案的位置,画圆圈或者矩形将答案圈住,智能台灯上的红外探测器可探测到红外笔的移动轨迹,将该移动轨迹发送到智能台灯的控制器,智能台灯的控制器可根据该移动轨迹,在习题展示区VS1_1上生成图案,然后根据该图案为圆圈或者矩形,在生成图案后的预设时间,如3秒后,再在习题展示区VS1_1和第二虚拟显示屏VS2上取消该圆圈或矩形,以及答案的图案显示,使用户可以在习题展示区VS1_1和VS2上看到原来填写的答案已被删除。
在一些实施例中,智能台灯也可被配置为通过别的方式撤销用户填写的答案,例如,在习题展示区VS1_1的界面的上部显示橡皮擦控件,该橡皮擦控件可被配置为:在接收到超过预设时长如3秒的点击信号后由非活跃状态切换为活跃状态,或者由活跃状态切换为非活跃状态,在活跃状态下,可跟随红外笔的移动轨迹进行移动,然后根据双击信号启动擦除模式,在擦除模式下,获取橡皮擦控件覆盖区域的实时坐标,生成包含该坐标的实时擦除指令,将该实时擦除指发送给智能台灯的控制器,使控制器根据该实时擦除指令,撤销实时擦除指令包含坐标的轨迹显示。根据上述配置,在第一次使用橡皮擦控件时,用户可先长按橡皮擦控件,激活橡皮擦控件,然后将橡皮擦控件移动至需要擦除的区域,双击橡皮擦控件,然后拖动橡皮擦控件移动,此时,橡皮擦控件经过的区域的轨迹将被删除。
在删除完一个连续区域的轨迹后,在一些实施例中,若用户想继续做下一道练习题,可直接去下一道练习题的位置开始作答,橡皮擦控件被配置为在一段时间如15秒内没有接收到点击信号后,自动由活跃状态切换为非活跃状态,在非活跃状态下,用户可从橡皮擦控件的预设位置处重新激活橡皮擦控件。用户也可主动长按橡皮擦控件,将橡皮擦控件切换为非活跃状态。在一些实施例中,若用户想继续擦除下一个区域的轨迹,可双击橡皮擦控件,先结束擦除模式,再将橡皮擦控件移动至需要擦除的区域,再双击橡皮擦控件,启动擦除模式,开始擦除该区域的轨迹。
为避免用户忘记橡皮擦控件的使用方法,在一些实施例中,在习题展示区VS1_1的界面上可持续显示橡皮擦控件使用方法的提示,直到用户点击交卷控件,或者倒计时结束自动交卷。
在一些实施例中,练习内容被配置为可进行翻页,翻页方式可设置为左后滑动翻页或上下滑动翻页或通过翻页控件翻页等方式。用户在作答完当前界面的题目后,可在习题展示区VS1_1进行翻页操作,继续做下一页的题目。
在一些实施例中,在用户作答完全部题目后,可对已作答的题目进行检查。由于墙面上的第二虚拟显示屏VS2的显示面积比习题展示区VS1_1的面积大,且显示内容与习题展示区VS1_1的显示内容相同,因此,用户可在第二虚拟显示屏VS2对已作答的题目进行检查,在检查完一页题目后,可通过在习题展示区VS1_1进行翻页,由于第二虚拟显示屏VS2和习题展示区VS1_1显示相同的内容,因此,用户在习题展示区VS1_1进行翻页,可在第二虚拟显示屏VS2上看到翻页后的题目。在进行检查时,用户可根据草稿区VS1_2上的演算过程对习题展示区VS1_1的答案进行检查,草稿区VS1_2同样被配置为可以进行翻页。
在一些实施例中,用户检查完已作答的题目后,可在习题展示区VS1_1上点击交卷控件向服务器提交作答后的练习内容,或者,在倒计时结束后,智能台灯自动将作答后的练习内容提交给服务器。用户的老师可获取服务器上用户作答后的练习内容,对用户作答内容进行批改。
由上述实施例可见,本申请实施例通过在智能显示设备的一个显示画面划分为第一区域和第二区域,在第一区域上显示练习数据对应的界面,控制摄像头采集第一区域上的用户操作,不采集第二区域上的用户操作,从而可使用户直接在第二区域进行演算,不需要利用纸笔进行演算,并保护了用户隐私,保障了练习内容的整洁,提高了用户体验。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种智能显示设备,其特征在于,包括:
第一成像机构,用于根据控制器的控制在第一平面上形成第一显示画面;
第二成像机构,用于根据所述控制器的控制在第二平面上形成第二显示画面;
所述控制器,分别与所述第一成像机构和所述第二成像机构通信连接,所述控制器被配置为:
根据接收到的练习数据生成练习内容;
在所述第二显示画面上全屏显示所述练习内容;
在所述第一显示画面上的第一区域显示所述练习内容,不在所述第一显示画面上的第二区域显示所述练习内容;其中,
所述第一区域和所述第二区域同时位于所述第一显示画面中,所述第一区域用于与所述第二显示画面同步呈现对应所述第一区域内输入的触控轨迹的图案,所述第二区域用于单独呈现对应所述第二区域内输入的触控轨迹的图案,对应所述第二区域内输入的触控轨迹图案不在所述第二显示画面呈现。
2.根据权利要求1所述的智能显示设备,其特征在于,所述控制器被配置为:
检测用户在所述第一平面上输入的触控轨迹;
若所述触控轨迹在所述第一区域,将对应所述触控轨迹的图案同步显示在所述第一区域和第二显示画面上;
若所述触控轨迹在所述第二区域,将对应所述触控轨迹的图案仅在所述第二区域呈现,不在所述第二显示画面上呈现。
3.根据权利要求2所述的智能显示设备,其特征在于,若所述触控轨迹在所述第一区域,将对应所述触控轨迹的图案同步显示在所述第一区域和第二显示画面上,包括:
根据所述触控轨迹确定图案;
若所述触控轨迹在所述第一区域,在所述第一显示画面的当前图像的上方叠加包含所述图案的图层,得到第一图像,其中,所述当前图像是在检测用户在所述第一平面上输入的触控轨迹前的所述第一显示画面的图像;
根据所述第一图像生成更新后的第一显示画面;
在所述第一图像中裁切掉对应所述第二区域的部分,生成待显示图像,并根据所述待显示图像生成更新后的第二显示画面。
4.根据权利要求2所述的智能显示设备,其特征在于,还包括摄像头,所述摄像头与所述控制器通信连接,其中,所述摄像头被配置为采集范围仅覆盖所述第一区域,不覆盖所述第二区域;若所述触控轨迹在所述第一区域,将对应所述触控轨迹的图案同步显示在所述第一区域和第二显示画面上,包括:
根据所述触控轨迹确定图案;
若所述触控轨迹在所述第一区域,在所述第一显示画面的当前图像的上方叠加包含所述图案的图层,得到第一图像,其中,所述当前图像是在检测用户在所述第一平面上输入的触控轨迹前的所述第一显示画面的图像;
根据所述第一图像生成更新后的第一显示画面;
通过所述摄像头采集更新后的第一显示画面中的练习区域的图像;
将所述摄像头采集的图像生成更新后的第二显示画面。
5.根据权利要求4所述的智能显示设备,其特征在于,若所述触控轨迹在所述第二区域,将对应所述触控轨迹的图案仅在所述第二区域呈现,不在所述第二显示画面上呈现,包括:
若所述触控轨迹在所述第二区域,在所述第一显示画面的当前图像的上方叠加包含所述图案的图层,得到第二图像,其中,所述当前图像是在检测用户在所述第一平面上输入的触控轨迹前的所述第一显示画面的图像;
根据所述第二图像生成更新后的第一显示画面;
通过所述摄像头采集更新后的第一显示画面中的练习区域的图像;
根据所述摄像头采集的图像生成更新后的第二显示画面。
6.根据权利要求1所述的智能显示设备,其特征在于,所述第二区域设置有用于切换所述第二区域显示内容的翻页控件。
7.根据权利要求2所述的智能显示设备,其特征在于,检测用户在所述第一平面上输入的触控轨迹,包括:
检测所述第一平面上方的红外光的移动轨迹;
将所述移动轨迹确定为用户在所述第一平面上输入的触控轨迹。
8.根据权利要求1所述的智能显示设备,其特征在于,所述控制器还被配置为:
根据练习模式控件的触发信号或练习题控件的触发信号进入练习模式,其中,所述练习模式控件或练习题控件设置在所述第一显示画面显示的图像上,在所述练习模式下,所述练习内容同步展示在所述第一区域和第二显示画面,在非练习模式下,所述练习内容全屏展示在所述第一显示画面。
9.一种智能显示设备,其特征在于,包括:
第一成像机构,用于根据控制器的控制在第一平面上形成第一显示画面;
第二成像机构,用于根据所述控制器的控制在第二平面上形成第二显示画面;
控制器,分别与所述第一成像机构和所述第二成像机构通信连接,所述控制器被配置为:
接收用户输入的练习模式控件的触发指令;
响应于所述练习模式控件的触发指令,获取所述练习模式控件对应的练习数据;
根据所述练习数据生成练习内容;
在所述第一显示画面的第一区域显示所述练习内容,在所述第一显示画面的第二区域显示空白内容,在所述第二显示画面显示倒计时,其中,所述第一区域的面积小于所述第一显示画面的面积;
接收用户在所述第一显示画面上输入的触控轨迹;
在所述第一显示画面显示所述触控轨迹;
接收用户输入的交卷控件的触发指令;
响应于所述交卷控件的触发指令,向服务器发送所述第一区域的图像数据,不向服务器发送所述第二区域的图像数据。
10.一种练习记录采集方法,用于智能显示设备,其特征在于,所述智能显示设备设置有第一显示画面和第二显示画面,所述练习记录采集方法包括:
根据接收到的练习数据生成练习内容;
在所述第二显示画面上全屏显示所述练习内容;
在所述第一显示画面上的第一区域显示所述练习内容,不在所述第一显示画面上的第二区域显示所述练习内容;其中,
所述第一区域和所述第二区域同时位于所述第一显示画面中,所述第一区域用于与所述第二显示画面同步呈现对应所述第一区域内输入的触控轨迹的图案,所述第二区域用于单独呈现对应所述第二区域内输入的触控轨迹的图案,对应所述第二区域内输入的触控轨迹图案不在所述第二显示画面呈现。
CN202110522907.4A 2020-05-14 2021-05-13 智能显示设备及练习记录采集方法 Active CN113178105B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010408081 2020-05-14
CN2020104080814 2020-05-14

Publications (2)

Publication Number Publication Date
CN113178105A CN113178105A (zh) 2021-07-27
CN113178105B true CN113178105B (zh) 2022-05-24

Family

ID=76929281

Family Applications (4)

Application Number Title Priority Date Filing Date
CN202110360544.9A Active CN113676709B (zh) 2020-05-14 2021-04-02 智能投影设备及多屏显示方法
CN202110522907.4A Active CN113178105B (zh) 2020-05-14 2021-05-13 智能显示设备及练习记录采集方法
CN202110529750.8A Active CN113194302B (zh) 2020-05-14 2021-05-14 智能显示设备及开机控制方法
CN202110528461.6A Active CN113676710B (zh) 2020-05-14 2021-05-14 智能显示设备及应用管理方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202110360544.9A Active CN113676709B (zh) 2020-05-14 2021-04-02 智能投影设备及多屏显示方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN202110529750.8A Active CN113194302B (zh) 2020-05-14 2021-05-14 智能显示设备及开机控制方法
CN202110528461.6A Active CN113676710B (zh) 2020-05-14 2021-05-14 智能显示设备及应用管理方法

Country Status (1)

Country Link
CN (4) CN113676709B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0959452A2 (de) * 1998-05-23 1999-11-24 Mannesmann VDO Aktiengesellschaft Verfahren zur Darstellung veränderlicher Informationen
CN103150104A (zh) * 2007-01-07 2013-06-12 苹果公司 触摸屏显示器上的列表滚动和文档平移、缩放和旋转
CN106569692A (zh) * 2016-10-26 2017-04-19 青岛海信电器股份有限公司 手势擦除方法及装置
CN107132981A (zh) * 2017-03-27 2017-09-05 网易(杭州)网络有限公司 游戏画面的显示控制方法及装置、存储介质、电子设备
CN108111758A (zh) * 2017-12-22 2018-06-01 努比亚技术有限公司 一种拍摄预览方法、设备及计算机可读存储介质
CN108334229A (zh) * 2018-01-31 2018-07-27 广州视源电子科技股份有限公司 调整书写轨迹的方法、装置及设备、可读存储介质
CN108513070A (zh) * 2018-04-04 2018-09-07 维沃移动通信有限公司 一种图像处理方法、移动终端及计算机可读存储介质
CN108920016A (zh) * 2018-08-15 2018-11-30 京东方科技集团股份有限公司 触控显示装置、触控显示客户端以及触控信息处理装置
CN110908574A (zh) * 2019-12-04 2020-03-24 成都星时代宇航科技有限公司 一种显示调节方法、装置、终端及存储介质
CN110941383A (zh) * 2019-10-11 2020-03-31 广州视源电子科技股份有限公司 双屏幕显示方法、装置、设备及存储介质

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10503342B2 (en) * 2006-08-04 2019-12-10 Apple Inc. User interface spaces
JP2007184002A (ja) * 2007-04-02 2007-07-19 Fujitsu Ltd マルチプロセス管理装置及びコンピュータ読み取り可能な記録媒体
US9292306B2 (en) * 2007-11-09 2016-03-22 Avro Computing, Inc. System, multi-tier interface and methods for management of operational structured data
CN102495711B (zh) * 2011-11-15 2017-05-17 中兴通讯股份有限公司 虚拟多屏实现方法及装置
JP2014170147A (ja) * 2013-03-05 2014-09-18 Funai Electric Co Ltd プロジェクタ
US20140344765A1 (en) * 2013-05-17 2014-11-20 Barnesandnoble.Com Llc Touch Sensitive UI Pinch and Flick Techniques for Managing Active Applications
CN104461001B (zh) * 2014-12-02 2018-02-27 联想(北京)有限公司 一种信息处理方法及电子设备
US9798355B2 (en) * 2014-12-02 2017-10-24 Lenovo (Beijing) Co., Ltd. Projection method and electronic device
KR102350382B1 (ko) * 2015-07-16 2022-01-13 삼성전자 주식회사 디스플레이장치 및 그 제어방법
US10209851B2 (en) * 2015-09-18 2019-02-19 Google Llc Management of inactive windows
CN106020796A (zh) * 2016-05-09 2016-10-12 北京小米移动软件有限公司 界面显示方法及装置
CN106647934A (zh) * 2016-08-04 2017-05-10 刘明涛 一种微型投影电脑
CN106716357B (zh) * 2016-12-29 2019-11-01 深圳前海达闼云端智能科技有限公司 多系统移动终端的控制方法、控制装置及电子设备
CN106598161A (zh) * 2017-01-03 2017-04-26 蒲婷 一种模块化的便携式光学计算机
CN106782268B (zh) * 2017-01-04 2020-07-24 京东方科技集团股份有限公司 显示系统和用于显示面板的驱动方法
WO2018213451A1 (en) * 2017-05-16 2018-11-22 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
CN107197223A (zh) * 2017-06-15 2017-09-22 北京有初科技有限公司 微型投影设备和投影设备的手势控制方法
JP2019082649A (ja) * 2017-10-31 2019-05-30 アルプスアルパイン株式会社 映像表示システム
CN108769506B (zh) * 2018-04-16 2020-04-21 Oppo广东移动通信有限公司 图像采集方法、装置、移动终端及计算机可读介质
CN108874342B (zh) * 2018-06-13 2021-08-03 深圳市东向同人科技有限公司 投影视图切换方法及终端设备
CN108874341B (zh) * 2018-06-13 2021-09-14 深圳市东向同人科技有限公司 屏幕投影方法及终端设备
CN110008011B (zh) * 2019-02-28 2021-07-16 维沃移动通信有限公司 一种任务切换方法及终端设备
CN110062288A (zh) * 2019-05-21 2019-07-26 广州视源电子科技股份有限公司 应用管理方法、装置、用户终端、多媒体终端及存储介质
CN110347305A (zh) * 2019-05-30 2019-10-18 华为技术有限公司 一种vr多屏显示方法及电子设备
CN110471639B (zh) * 2019-07-23 2022-10-18 华为技术有限公司 显示方法及相关装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0959452A2 (de) * 1998-05-23 1999-11-24 Mannesmann VDO Aktiengesellschaft Verfahren zur Darstellung veränderlicher Informationen
CN103150104A (zh) * 2007-01-07 2013-06-12 苹果公司 触摸屏显示器上的列表滚动和文档平移、缩放和旋转
CN106569692A (zh) * 2016-10-26 2017-04-19 青岛海信电器股份有限公司 手势擦除方法及装置
CN107132981A (zh) * 2017-03-27 2017-09-05 网易(杭州)网络有限公司 游戏画面的显示控制方法及装置、存储介质、电子设备
CN108111758A (zh) * 2017-12-22 2018-06-01 努比亚技术有限公司 一种拍摄预览方法、设备及计算机可读存储介质
CN108334229A (zh) * 2018-01-31 2018-07-27 广州视源电子科技股份有限公司 调整书写轨迹的方法、装置及设备、可读存储介质
CN108513070A (zh) * 2018-04-04 2018-09-07 维沃移动通信有限公司 一种图像处理方法、移动终端及计算机可读存储介质
CN108920016A (zh) * 2018-08-15 2018-11-30 京东方科技集团股份有限公司 触控显示装置、触控显示客户端以及触控信息处理装置
CN110941383A (zh) * 2019-10-11 2020-03-31 广州视源电子科技股份有限公司 双屏幕显示方法、装置、设备及存储介质
CN110908574A (zh) * 2019-12-04 2020-03-24 成都星时代宇航科技有限公司 一种显示调节方法、装置、终端及存储介质

Also Published As

Publication number Publication date
CN113194302B (zh) 2022-06-21
CN113676709A (zh) 2021-11-19
CN113676710A (zh) 2021-11-19
CN113178105A (zh) 2021-07-27
CN113676709B (zh) 2023-10-27
CN113676710B (zh) 2024-03-29
CN113194302A (zh) 2021-07-30

Similar Documents

Publication Publication Date Title
CN106371593B (zh) 一种投影交互式书法练习系统及其实现方法
CN111935532B (zh) 视频的交互方法、装置、电子设备及存储介质
US20110243380A1 (en) Computing device interface
CN113504852A (zh) 一种录播一体的智能全面屏黑板系统的控制方法
WO2016051366A2 (en) Switching between the real world and virtual reality
US11595615B2 (en) Conference device, method of controlling conference device, and computer storage medium
JP6255935B2 (ja) 筆跡再生装置及びプログラム
CN109388321B (zh) 电子白板的操作方法及装置
CN113191184A (zh) 实时视频处理方法、装置、电子设备及存储介质
CN116781847A (zh) 一种黑板板书导播方法、装置、设备及存储介质
JP2019133690A (ja) 物理的タイプの対話性を再現する通信のシステム及び方法
CN113178105B (zh) 智能显示设备及练习记录采集方法
CN103996315A (zh) 一种新型的无线多媒体互动教学系统的系统安全设置方法
CN103996317A (zh) 一种新型的无线多媒体互动教学系统
JP5915118B2 (ja) アーカイブシステム、第一の端末及びプログラム
TW202016904A (zh) 實物教學投影系統及方法
CN215932882U (zh) 智能照明系统及智能教育系统
CN210157300U (zh) 一种具有ai交互功能的微型投影仪
JP6260210B2 (ja) 表示システム、表示方法及びプログラム
US20100053080A1 (en) Method For Setting Up Location Information On Display Screens And A Recognition Structure Thereof
CN220064793U (zh) 书写装置及书写系统
CN104200710A (zh) 一种新型的无线多媒体互动教学系统及故障处理方法
CN205388735U (zh) 一种三维场景互动展示装置
CN215376590U (zh) 一种智能互联黑板
CN112488890B (zh) 基于远距离显示的交互学习辅助方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant