CN116909465B - 一种智能触摸一体机的交互系统及方法 - Google Patents

一种智能触摸一体机的交互系统及方法 Download PDF

Info

Publication number
CN116909465B
CN116909465B CN202310865076.XA CN202310865076A CN116909465B CN 116909465 B CN116909465 B CN 116909465B CN 202310865076 A CN202310865076 A CN 202310865076A CN 116909465 B CN116909465 B CN 116909465B
Authority
CN
China
Prior art keywords
touch
state
interface
information
machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310865076.XA
Other languages
English (en)
Other versions
CN116909465A (zh
Inventor
周信恒
罗东龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Haominsheng Electronic Technology Co ltd
Original Assignee
Guangzhou Haominsheng Electronic Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Haominsheng Electronic Technology Co ltd filed Critical Guangzhou Haominsheng Electronic Technology Co ltd
Priority to CN202310865076.XA priority Critical patent/CN116909465B/zh
Publication of CN116909465A publication Critical patent/CN116909465A/zh
Application granted granted Critical
Publication of CN116909465B publication Critical patent/CN116909465B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种智能触摸一体机的交互系统及方法,涉及触摸屏控制技术领域,通过触控信息处理模块的处理得到异常触控状态和正常触控状态,之后通过界面信息判断模块获取到正常触控状态下的用户的操作,获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,防止儿童或者其他人对触控一体机的误触;之后触屏操作监控模块获得到此时的目标触控机的控制状态,当控制状态为空白状态时,先对屏幕前的人脸进行识别,并生成返回确认信息,传输至对应的用户,触控界面控制模块根据异常触控信号和返回主操控界面信号对目标触控机的触控界面进行控制,防止目标触控机在长时间无人使用时停留在搜索界面而产生的流量损耗。

Description

一种智能触摸一体机的交互系统及方法
技术领域
本发明属于触摸屏控制技术领域,具体是一种智能触摸一体机的交互系统及方法。
背景技术
触摸一体机是集先进的触摸屏、主板、内存、硬盘、显卡等电子元器件组成,与传统PC机的工作原理并无二致。根据触摸屏屏体的大小并配合软件可实现如公众信息查询、广告展示、媒体互动、会议内容展示、线下体验店商品展示等,如配合指纹仪、扫描仪、读卡器、微型打印机等外设,可实现指纹考勤、刷卡、打印等特定需求。一般区别于电子白板,可实现的功能更多。
而现在的放置在展览厅中的智能触摸一体机大多数作为查询功能进行使用,一般用户在使用完成后就直接将触控一体机的显示屏幕放置在搜索界面,并不会将搜索界面进行关闭,长时间的停留在搜索显示的界面不仅会耗费流量,且会使得显示画面较为杂乱,同时由于展厅中的人员的年龄阶段不一致,可能会存在低龄化儿童等人对智能触控一体机进行误触等现象,从而造成智能触控一体机的故障。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一;为此,本发明提出了一种智能触摸一体机的交互系统及方法,用于解决上述所提出的技术问题。
为实现上述目的,根据本发明的第一方面的实施例提出一种智能触摸一体机的交互系统,包括:
触控信息处理模块,用于对目标触控机的交互信息进行惯性分析,目标触控机指使用本系统的智能触控一体机,交互信息指目标触控机与用户的触控之间的指令的信息的交换,通过获取到周期时间T内,用户的操作次数和指令触发次数,并采用公式进行计算得到空白操作占比,并与预设比值Y1进行比较,得到异常触控状态和预正常触控状态,之后将异常触控状态生成异常触控信息并传输至触控界面控制模块,将预正常触控状态的信息传输至界面信息判断模块;
界面信息判断模块,用于根据预正常触控状态下的触控信息,通过提取每一步操作的指令信息中的关键词,同时获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,将异常操作状态生成异常触控信号并传输至触控界面控制模块,同时将正常操作状态下的屏幕使用状态的信息传输至触屏操作监控模块;
触屏操作监控模块,用于根据正常操作状态下的屏幕使用状态的信息,先对目标触控机的显示界面的停留时间进行获取,当获取到目标触控机的控制状态为空白状态时,对目标触控机的显示屏幕前的人脸信息进行识别,从而生成提醒信号和返回主操控界面信号,并分别将提醒信号和返回主操控界面信号传输至触控提醒确认模块和触控界面控制模块;
触控提醒确认模块,用于接收提醒信号并生成提醒信息,对用户进行提醒,若用户在提醒信息生成后预设时间T1内没有对目标触控机的显示屏幕上进行操作,触控提醒确认模块将生成返回主操控界面信号,并传输至触控界面控制模块;
触控界面控制模块,用于根据接收的异常触控信号和返回主操控界面信号,控制目标触控机的显示界面返回至原始的主操控界面,同时当所接收的信号为异常触控信号时,触控界面控制模块将对主操控界面的屏幕进行锁定,并进行锁定信号提醒。
优选的,所述惯性分析的方法为:
S1:首先将目标触控机在初始状态下的界面标记为主操控界面,之后对交互信息中的信息进行提取,先获取到用户在周期时间T内的对触控屏的操作次数,并将操作次数标记为Ci,i表示不同的时间段;
S2:之后对同一个周期时间T内的指令触发次数标记为Zi,同时将指令未触发的触控操作标记为空白操作,且在同一周期时间内的空白操作的次数标记为Ki,Ki=Ci-Zi;
S3:将空白操作次数Ki除以操作次数Ci得到空白操作占比,将空白操作占比与预设比值Y1进行比较;
当空白操作占比超过预设比值Y1时,将其标记为异常触控状态,同时生成异常触控信号,并传输至触控界面控制模块;当空白操作占比小于预设比值Y1时,将其先标记为预正常触控状态,同时触控信息处理模块将预正常触控状态的信息传输至界面信息判断模块。
优选的,根据关联值获取到异常操作状态和正常操作状态的方法为:
获取到预正常触控状态下的用户的操作,先将其中的空白操作进行删除得到剩下的操作,同时对剩下的操作的指令信息进行获取,将其按照时间顺序,将每一步操作的指令信息标记为ZLj,j表示每一步的操作步骤所对应的指令信息;
之后按照顺序,将每一步的指令信息所执行的内容中的关键词进行选取,获取关键词之间的关联值,当关联值小于预设值时,将其标记为异常操作状态,同时生成异常触控信号,并传输至触控界面控制模块,将关联值超过预设值的状态标记为正常操作状态,同时将正常操作状态下的目标触控机的屏幕使用状态传输至触屏操作监控模块。
优选的,生成提醒信号和返回主操控界面信号的方法为:
S21:首先对目标触控屏的屏幕显示时间进行计时,当目标触控屏的屏幕显示在一个界面时,且此时并未检测到任何触控信息,从此时刻开始计时,当触控屏上检测到触控信息时停止计时,从而得到界面停留时间TL;
S22:将界面停留时间TL与预设停留时间Ty进行比较,当TL小于等于Ty时,目标触控机的系统按照用户的输入指令正常运行,当TL大于Ty时,将此时的目标触控机的控制状态标记为空白状态;
S23:当识别到空白状态时,先对目标触控机的显示屏前的人脸进行监控,当目标触控机的显示屏幕前存在人脸时,将生成提醒信号传输至触控提醒确认模块,当显示屏幕前未存在人脸时,将直接生成返回主操控界面信号,并传输至触控界面操作模块;
S24:同时当目标触控机的显示界面在小于预设停留时间Ty的时间内,且目标触控机的显示屏幕前的人脸进行了改变,即目标触控机对站在显示屏幕前的人脸进行随时监测,当识别到的人脸与前一时间段的人脸不一致时,将先生成返回确认信息,传输至此时对应的用户,当用户确认返回时,将生成返回主操控界面信号,并传输至触控界面控制模块,当用户选择不返回时,将继续停留在此时的搜索界面。
优选的,所述目标触控机的交互信息通过交互信息采集模块进行获取,并传输至触控信息处理模块。
一种智能触摸一体机的交互方法,包括:
步骤一:先对目标触控机的交互信息进行采集,之后获取到周期时间T内,用户的操作次数和指令触发次数,并采用公式进行计算得到空白操作占比;
步骤二:之后根据空白操作占比与预设比值进行比较,得到异常触控状态和预正常触控状态,将异常触控状态下的目标触控的显示屏幕的界面反复值主界面并进行锁定,同时生成锁定提醒;
步骤三:获取到预正常触控状态下的用户的操作,提取每一步操作的指令信息中的关键词,同时获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,将异常操作状态下的显示界面返回至主界面并进行锁定;
步骤四:获取正常操作状态下屏幕的搜索界面的停留时间,从而获得到此时的目标触控机的控制状态,当控制状态为空白状态时,先对屏幕前的人脸进行识别,从而对目标触控机的显示界面进行控制,同时当目标触控机所识别的人脸与上个时间段的人脸不一致时,将生成返回确认信息,并传输至对应的用户,从而对目标触控机的触控界面进行控制。
与现有技术相比,本发明的有益效果是:通过触控信息处理模块先根据空白操作占比与预设比值进行比较,得到异常触控状态和预正常触控状态,同时将异常触控状态生成异常触控信号,之后通过界面信息判断模块获取到预正常触控状态下的用户的操作,提取每一步操作的指令信息中的关键词,同时获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,防止儿童或者其他人对触控一体机的误触,而导致触控一体机出现故障;
之后触屏操作监控模块获得到此时的目标触控机的控制状态,当控制状态为空白状态时,先对屏幕前的人脸进行识别,当目标触控机所识别的人脸与上个时间段的人脸不一致时,将生成返回确认信息,并传输至对应的用户,之后触控界面控制模块根据异常触控信号和返回主操控界面信号对目标触控机的触控界面进行控制,防止目标触控机在长时间无人使用时停留在搜索界面而产生的流量损耗,同时当识别出不同的用户进行操作时,对显示界面进行控制,减少用户的操作,使触控一体机的显示画面更加精简。
附图说明
图1为本发明系统框架原理图。
具体实施方式
下面将结合实施例对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参阅图1,本申请提供了一种智能触摸一体机的交互系统,包括交互信息采集模块、触控信息处理模块、界面信息判断模块、触屏操作监控模块、触控提醒确认模块和触控界面控制模块;
交互信息采集模块用于对目标触控机的交互信息进行采集,目标触控机指使用本系统的智能触摸一体机,交互信息指目标触控机与用户的触控之间的指令的信息的交换,具体的指用户在对目标触控机上进行触控,之后目标触控机对触控的位置的指令进行识别并检索,之后将所检索的内容进行呈现,同时交互信息还包括对用户的触屏次数以及触屏应用中的指令的触发次数进行采集,之后交互信息采集模块将所收集的目标触控机的交互信息传输至触控信息处理模块;
触控信息处理模块用于对目标触控机的交互信息进行惯性分析,具体的分析方法为:
S1:首先将目标触控机在初始状态下的界面标记为主操控界面,之后对交互信息中的信息进行提取,先获取到用户在周期时间T内的对触控屏的操作次数,并将操作次数标记为Ci,i表示不同的时间段,其中操作次数指用户在触控屏上的触控次数,周期时间T为预设值,其具体的值由相关的专业人员进行取值;
S2:之后对同一个周期时间T内的指令触发次数标记为Zi,在此要说明的是,在用户对目标触控机进行操作的过程中,会存在误触的情况,即用户对目标触控机的屏幕进行触控,但是并没有触控到指令所存在的位置,所以使屏幕还停留在原来操控界面,并无任何执行指令,同时将指令未触发的触控操作标记为空白操作,且在同一周期时间内的空白操作的次数标记为Ki,Ki=Ci-Zi;
S3:将空白操作次数Ki除以操作次数Ci得到空白操作占比,将空白操作占比与预设比值Y1进行比较,Y1的具体值由相关人员进行设置;
当空白操作占比超过预设比值Y1时,将其标记为异常触控状态,同时生成异常触控信号,并传输至触控界面控制模块;当空白操作占比小于预设比值Y1时,将其先标记为预正常触控状态,同时触控信息处理模块将预正常触控状态的信息传输至界面信息判断模块;
界面信息判断模块用于根据预正常触控状态下的触控信息,对用户的操作之间的关联度进行分析,具体的分析方法为:
获取到预正常触控状态下的用户的操作,先将其中的空白操作进行删除得到剩下的操作,同时对剩下的操作的指令信息进行获取,将其按照时间顺序,将每一步操作的指令信息标记为ZLj,j表示每一步的操作步骤所对应的指令信息;
之后按照顺序,将每一步的指令信息所执行的内容中的关键词进行选取,获取关键词之间的关联值,当关联值小于预设值时,将其标记为异常操作状态,同时生成异常触控信号,并传输至触控界面控制模块,将关联值超过预设值的状态标记为正常操作状态,同时将正常操作状态下的目标触控机的屏幕使用状态传输至触屏操作监控模块;
触屏操作监控模块用于根据目标触控机的屏幕使用的正常操作状态下对目标触控机周边的使用环境进行监控和识别,具体的方法为:
S21:首先对目标触控屏的屏幕显示时间进行计时,当目标触控屏的屏幕显示在一个界面时,且此时并未检测到任何触控信息,从此时刻开始计时,当触控屏上检测到触控信息时停止计时,从而得到界面停留时间TL;
S22:将界面停留时间TL与预设停留时间Ty进行比较,当TL小于等于Ty时,目标触控机的系统按照用户的输入指令正常运行,当TL大于Ty时,将此时的目标触控机的控制状态标记为空白状态;
S23:之后当识别到空白状态时,先对目标触控机的显示屏前的人脸进行监控,当目标触控机的显示屏幕前存在人脸时,将生成提醒信号传输至触控提醒确认模块,当显示屏幕前未存在人脸时,将直接生成返回主操控界面信号,并传输至触控界面操作模块;
S24:同时当目标触控机的显示界面在小于预设停留时间Ty的时间内,且目标触控机的显示屏幕前的人脸进行了改变,即目标触控机对站在显示屏幕前的人脸进行随时监测,当识别到的人脸与前一时间段的人脸不一致时,将先生成返回确认信息,传输至此时对应的用户,当用户确认返回时,将生成返回主操控界面信号,并传输至触控界面控制模块,当用户选择不返回时,将继续停留在此时的搜索界面;
触控提醒确认模块用于接收提醒信号并生成提醒信息传输至目标触控机的显示屏幕上,对用户进行提醒,若用户在提醒信息生成后预设时间T1内没有对目标触控机的显示屏幕上进行操作,触控提醒确认模块将生成返回主操控界面信号,并传输至触控界面控制模块;
触控界面控制模块用于接收异常触控信号和返回主操控界面信号,之后根据所接收的异常触控信号和返回主操控界面信号,将控制目标触控机的显示界面返回至原始的主操控界面,同时当所接收的信号为异常触控信号时,触控界面控制模块将对主操控界面的屏幕进行锁定,并进行锁定信号提醒。
一种智能触摸一体机的交互方法,包括:
步骤一:先对目标触控机的交互信息进行采集,之后获取到周期时间T内,用户的操作次数和指令触发次数,并采用公式进行计算得到空白操作占比;
步骤二:之后根据空白操作占比与预设比值进行比较,得到异常触控状态和预正常触控状态,将异常触控状态下的目标触控的显示屏幕的界面反复值主界面并进行锁定,同时生成锁定提醒;
步骤三:获取到预正常触控状态下的用户的操作,提取每一步操作的指令信息中的关键词,同时获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,将异常操作状态下的显示界面返回至主界面并进行锁定;
步骤四:获取正常操作状态下屏幕的搜索界面的停留时间,从而获得到此时的目标触控机的控制状态,当控制状态为空白状态时,先对屏幕前的人脸进行识别,从而对目标触控机的显示界面进行控制,同时当目标触控机所识别的人脸与上个时间段的人脸不一致时,将生成返回确认信息,并传输至对应的用户,从而对目标触控机的触控界面进行控制。
上述公式中的部分数据均是去除量纲取其数值计算,公式是由采集的大量数据经过软件模拟得到最接近真实情况的一个公式;公式中的预设参数和预设阈值由本领域的技术人员根据实际情况设定或者通过大量数据模拟获得。
本发明的工作原理:首先通过交互信息采集模块对目标触控机的交互信息进行采集,之后通过触控信息处理模块先根据空白操作占比与预设比值进行比较,得到异常触控状态和预正常触控状态,同时将异常触控状态生成异常触控信号,之后通过界面信息判断模块获取到预正常触控状态下的用户的操作,提取每一步操作的指令信息中的关键词,同时获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,同时也将异常操作状态生成异常触控信号,之后触屏操作监控模块获取正常操作状态下屏幕的搜索界面的停留时间,从而获得到此时的目标触控机的控制状态,当控制状态为空白状态时,先对屏幕前的人脸进行识别,并生成返回主操控界面信号,同时当目标触控机所识别的人脸与上个时间段的人脸不一致时,将生成返回确认信息,并传输至对应的用户,之后触控界面控制模块根据异常触控信号和返回主操控界面信号对目标触控机的触控界面进行控制。
以上实施例仅用以说明本发明的技术方法而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方法进行修改或等同替换,而不脱离本发明技术方法的精神和范围。

Claims (5)

1.一种智能触摸一体机的交互系统,其特征在于,包括:
触控信息处理模块,用于对目标触控机的交互信息进行惯性分析,目标触控机指使用本系统的智能触控一体机,交互信息指目标触控机与用户的触控之间的指令的信息的交换,通过获取到周期时间T内,用户的操作次数和指令触发次数,并采用公式进行计算得到空白操作占比,并与预设比值Y1进行比较,得到异常触控状态和预正常触控状态,之后将异常触控状态生成异常触控信息并传输至触控界面控制模块,将预正常触控状态的信息传输至界面信息判断模块;
具体的惯性分析的方法为:
S1:首先将目标触控机在初始状态下的界面标记为主操控界面,之后对交互信息中的信息进行提取,先获取到用户在周期时间T内的对触控屏的操作次数,并将操作次数标记为Ci,i表示不同的时间段;
S2:之后对同一个周期时间T内的指令触发次数标记为Zi,同时将指令未触发的触控操作标记为空白操作,且在同一周期时间内的空白操作的次数标记为Ki,Ki=Ci-Zi;
S3:将空白操作次数Ki除以操作次数Ci得到空白操作占比,将空白操作占比与预设比值Y1进行比较;
当空白操作占比超过预设比值Y1时,将其标记为异常触控状态,同时生成异常触控信号,并传输至触控界面控制模块;当空白操作占比小于预设比值Y1时,将其先标记为预正常触控状态,同时触控信息处理模块将预正常触控状态的信息传输至界面信息判断模块;
界面信息判断模块,用于根据预正常触控状态下的触控信息,通过提取每一步操作的指令信息中的关键词,同时获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,将异常操作状态生成异常触控信号并传输至触控界面控制模块,同时将正常操作状态下的屏幕使用状态的信息传输至触屏操作监控模块;
触屏操作监控模块,用于根据正常操作状态下的屏幕使用状态的信息,先对目标触控机的显示界面的停留时间进行获取,当获取到目标触控机的控制状态为空白状态时,对目标触控机的显示屏幕前的人脸信息进行识别,从而生成提醒信号和返回主操控界面信号,并分别将提醒信号和返回主操控界面信号传输至触控提醒确认模块和触控界面控制模块;
触控提醒确认模块,用于接收提醒信号并生成提醒信息,对用户进行提醒,若用户在提醒信息生成后预设时间T1内没有对目标触控机的显示屏幕上进行操作,触控提醒确认模块将生成返回主操控界面信号,并传输至触控界面控制模块;
触控界面控制模块,用于根据接收的异常触控信号和返回主操控界面信号,控制目标触控机的显示界面返回至原始的主操控界面,同时当所接收的信号为异常触控信号时,触控界面控制模块将对主操控界面的屏幕进行锁定,并进行锁定信号提醒。
2.根据权利要求1所述的一种智能触摸一体机的交互系统,其特征在于,根据关联值获取到异常操作状态和正常操作状态的方法为:
获取到预正常触控状态下的用户的操作,先将其中的空白操作进行删除得到剩下的操作,同时对剩下的操作的指令信息进行获取,将其按照时间顺序,将每一步操作的指令信息标记为ZLj,j表示每一步的操作步骤所对应的指令信息;
之后按照顺序,将每一步的指令信息所执行的内容中的关键词进行选取,获取关键词之间的关联值,当关联值小于预设值时,将其标记为异常操作状态,同时生成异常触控信号,并传输至触控界面控制模块,将关联值超过预设值的状态标记为正常操作状态,同时将正常操作状态下的目标触控机的屏幕使用状态传输至触屏操作监控模块。
3.根据权利要求1所述的一种智能触摸一体机的交互系统,其特征在于,生成提醒信号和返回主操控界面信号的方法为:
S21:首先对目标触控屏的屏幕显示时间进行计时,当目标触控屏的屏幕显示在一个界面时,且此时并未检测到任何触控信息,从此时刻开始计时,当触控屏上检测到触控信息时停止计时,从而得到界面停留时间TL;
S22:将界面停留时间TL与预设停留时间Ty进行比较,当TL小于等于Ty时,目标触控机的系统按照用户的输入指令正常运行,当TL大于Ty时,将此时的目标触控机的控制状态标记为空白状态;
S23:当识别到空白状态时,先对目标触控机的显示屏前的人脸进行监控,当目标触控机的显示屏幕前存在人脸时,将生成提醒信号传输至触控提醒确认模块,当显示屏幕前未存在人脸时,将直接生成返回主操控界面信号,并传输至触控界面操作模块;
S24:同时当目标触控机的显示界面在小于预设停留时间Ty的时间内,且目标触控机的显示屏幕前的人脸进行了改变,即目标触控机对站在显示屏幕前的人脸进行随时监测,当识别到的人脸与前一时间段的人脸不一致时,将先生成返回确认信息,传输至此时对应的用户,当用户确认返回时,将生成返回主操控界面信号,并传输至触控界面控制模块,当用户选择不返回时,将继续停留在此时的搜索界面。
4.根据权利要求1所述的一种智能触摸一体机的交互系统,其特征在于,所述目标触控机的交互信息通过交互信息采集模块进行获取,并传输至触控信息处理模块。
5.一种智能触摸一体机的交互方法,其特征在于,包括:
步骤一:先对目标触控机的交互信息进行采集,之后获取到周期时间T内,用户的操作次数和指令触发次数,并采用公式进行计算得到空白操作占比;
步骤二:之后根据空白操作占比与预设比值进行比较,得到异常触控状态和预正常触控状态,将异常触控状态下的目标触控的显示屏幕的界面返回至主界面并进行锁定,同时生成锁定提醒,具体的处理方法为:
S1:首先将目标触控机在初始状态下的界面标记为主操控界面,之后对交互信息中的信息进行提取,先获取到用户在周期时间T内的对触控屏的操作次数,并将操作次数标记为Ci,i表示不同的时间段;
S2:之后对同一个周期时间T内的指令触发次数标记为Zi,同时将指令未触发的触控操作标记为空白操作,且在同一周期时间内的空白操作的次数标记为Ki,Ki=Ci-Zi;
S3:将空白操作次数Ki除以操作次数Ci得到空白操作占比,将空白操作占比与预设比值Y1进行比较;
当空白操作占比超过预设比值Y1时,将其标记为异常触控状态,同时生成异常触控信号,并传输至触控界面控制模块;当空白操作占比小于预设比值Y1时,将其先标记为预正常触控状态;
步骤三:获取到预正常触控状态下的用户的操作,提取每一步操作的指令信息中的关键词,同时获取到关键词之间的关联值,然后根据关联值获取到异常操作状态和正常操作状态,将异常操作状态下的显示界面返回至主界面并进行锁定;
步骤四:获取正常操作状态下屏幕的搜索界面的停留时间,从而获得到此时的目标触控机的控制状态,当控制状态为空白状态时,先对屏幕前的人脸进行识别,从而对目标触控机的显示界面进行控制,同时当目标触控机所识别的人脸与上个时间段的人脸不一致时,将生成返回确认信息,并传输至对应的用户,从而对目标触控机的触控界面进行控制。
CN202310865076.XA 2023-07-13 2023-07-13 一种智能触摸一体机的交互系统及方法 Active CN116909465B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310865076.XA CN116909465B (zh) 2023-07-13 2023-07-13 一种智能触摸一体机的交互系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310865076.XA CN116909465B (zh) 2023-07-13 2023-07-13 一种智能触摸一体机的交互系统及方法

Publications (2)

Publication Number Publication Date
CN116909465A CN116909465A (zh) 2023-10-20
CN116909465B true CN116909465B (zh) 2024-03-15

Family

ID=88357624

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310865076.XA Active CN116909465B (zh) 2023-07-13 2023-07-13 一种智能触摸一体机的交互系统及方法

Country Status (1)

Country Link
CN (1) CN116909465B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080018445A (ko) * 2006-08-24 2008-02-28 엘지전자 주식회사 움직임 정보를 이용한 터치 스크린 입력 처리 장치 및 방법
CN108536231A (zh) * 2018-04-20 2018-09-14 广州昊旻晟电子技术有限公司 一种触摸一体机
CN108646966A (zh) * 2018-05-10 2018-10-12 维沃移动通信有限公司 一种灭屏时间调整方法及装置
CN108769299A (zh) * 2018-04-10 2018-11-06 Oppo广东移动通信有限公司 屏幕控制方法、装置以及移动终端
WO2019132071A1 (ko) * 2017-12-29 2019-07-04 (주) 유노믹 생산설비 제어용 대쉬보드
CN111373355A (zh) * 2017-12-04 2020-07-03 深圳市柔宇科技有限公司 触控方法、移动终端及计算机可读存储介质
CN114297017A (zh) * 2021-12-07 2022-04-08 阿里巴巴(中国)有限公司 异常处理方法、装置、电子设备和存储介质
CN114416008A (zh) * 2022-03-28 2022-04-29 深圳市掌视互娱网络有限公司 多屏互动系统及其操作方法
CN115981542A (zh) * 2022-12-24 2023-04-18 广州壹创电子科技有限公司 一种触摸屏的智能交互触摸控制方法、系统、设备及介质
CN116204799A (zh) * 2023-02-03 2023-06-02 北京达佳互联信息技术有限公司 数据识别方法、装置、电子设备及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104166468A (zh) * 2013-05-17 2014-11-26 环达电脑(上海)有限公司 触控屏幕装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080018445A (ko) * 2006-08-24 2008-02-28 엘지전자 주식회사 움직임 정보를 이용한 터치 스크린 입력 처리 장치 및 방법
CN111373355A (zh) * 2017-12-04 2020-07-03 深圳市柔宇科技有限公司 触控方法、移动终端及计算机可读存储介质
WO2019132071A1 (ko) * 2017-12-29 2019-07-04 (주) 유노믹 생산설비 제어용 대쉬보드
CN108769299A (zh) * 2018-04-10 2018-11-06 Oppo广东移动通信有限公司 屏幕控制方法、装置以及移动终端
CN108536231A (zh) * 2018-04-20 2018-09-14 广州昊旻晟电子技术有限公司 一种触摸一体机
CN108646966A (zh) * 2018-05-10 2018-10-12 维沃移动通信有限公司 一种灭屏时间调整方法及装置
CN114297017A (zh) * 2021-12-07 2022-04-08 阿里巴巴(中国)有限公司 异常处理方法、装置、电子设备和存储介质
CN114416008A (zh) * 2022-03-28 2022-04-29 深圳市掌视互娱网络有限公司 多屏互动系统及其操作方法
CN115981542A (zh) * 2022-12-24 2023-04-18 广州壹创电子科技有限公司 一种触摸屏的智能交互触摸控制方法、系统、设备及介质
CN116204799A (zh) * 2023-02-03 2023-06-02 北京达佳互联信息技术有限公司 数据识别方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN116909465A (zh) 2023-10-20

Similar Documents

Publication Publication Date Title
US11650659B2 (en) User input processing with eye tracking
US20160062456A1 (en) Method and apparatus for live user recognition
JP6986187B2 (ja) 人物識別方法、装置、電子デバイス、記憶媒体、及びプログラム
JP2002042115A (ja) 疲労緩和システム、疲労緩和方法及び記録媒体
WO2020135334A1 (zh) 电视应用主题切换方法、电视、可读存储介质及设备
WO2015117540A1 (en) Method and system for multi-state attendance which can indicate staff whereabouts
US20190385030A1 (en) Page analysis method and apparatus
US20230267729A1 (en) Image recognition
US20200293760A1 (en) Multi-modal identity recognition
CN103946887A (zh) 注视位置估计系统、注视位置估计系统的控制方法、注视位置估计装置、注视位置估计装置的控制方法、程序以及信息存储介质
CN112489235A (zh) 考勤装置及其方法
CN111881431A (zh) 人机验证方法、装置、设备及存储介质
Zyrianov et al. Automated recording and semantics-aware replaying of high-speed eye tracking and interaction data to support cognitive studies of software engineering tasks
WO2022089020A1 (zh) 事件展示方法及装置、存储介质及电子设备
CN116909465B (zh) 一种智能触摸一体机的交互系统及方法
CN107562205B (zh) 一种智能终端的投影键盘及该投影键盘的操作方法
CN113766297B (zh) 视频处理方法、播放终端及计算机可读存储介质
CN116205723A (zh) 基于人工智能的面签风险检测方法及相关设备
CN116027903A (zh) 基于大数据的计算机网络安全分析系统及方法
CN111859356B (zh) 应用程序登录方法及装置
CN110969040A (zh) 一种编码识别方法及头戴式增强现实装置
US20220083596A1 (en) Information processing apparatus and information processing method
CN109062403B (zh) 一种pda设备
JP6226352B1 (ja) 遠隔操作システム
CN114225388B (zh) 机器人游戏系统和游戏方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant