具体实施方式
下面结合附图和实施方式对本发明进行详细说明。
参照图1所示,图1是本发明远程虚拟交互检测方法的流程示意图。该方法包括以下步骤:
步骤S101:客户端与检测端建立数据共享通道。
在步骤S101中,数据共享通道包括桌面界面共享通道、视频共享通道、语音共享通道或者其他数据共享通道。在本实施例中,客户端通过APP(应用程序)、网页登录、远程登录或自身软件与检测端建立数据共享通道。即用户端安装APP即可自行登录到检测端的共享通道,或者用户端自行从网页上登录到检测端的共享通道等。应理解,客户端与检测端两者建立数据共享通道后,客户端可以在其本身的显示屏中显示检测端的显示屏所显示的桌面界面的内容,同时客户端可以在其本身的显示屏中视频直播检测端的显示屏所视频直播的内容,即客户端与检测端两者的显示屏所显示的桌面界面的内容和视频直播的内容相同或者不同。
步骤S102:客户端和检测端进行语音信号传输。
应理解,客户端与检测端建立数据共享通道后,客户端和检测端才可以进行语音信号传输。即客户端和检测端两者的语音信号传输的通道与数据共享通道相同。
步骤S103:检测端根据操作指令执行检测步骤,并在检测端的显示屏的第一桌面界面显示检测步骤和检测结果,以及在检测端的显示屏的第一视频窗口视频直播检测步骤和检测结果,且实时将检测端的显示屏所显示检测步骤和检测结果共享给服务器。
其中,操作指令为操作人员根据语音信号对检测端所实施的控制指令,如客户端的用户语音告诉操作人员第一操作,则操作人员则在检测端上执行与第一操作相对应的步骤;如客户端的用户语音告诉操作人员第二操作,则操作人员则在检测端上执行与第二操作相对应的步骤。在本实施例中,检测步骤包括检测样品的特性的操作顺序等,检测结果包括样品的受力变化程度、样品的裂缝程度、样品的元素构成、样品的元素比例或样品的耐温特性等。
应理解,第一桌面界面显示样品的特性的检测步骤,如第一桌面界面显示检测样品的顺序、第一桌面界面显示检测样品的位置、第一桌面界面显示样品的特性变化情况等。同时,第一桌面界面还显示检测结果,即每检测一步骤就显示一个检测结果。当然,第一桌面界面所显示的检测步骤都是虚拟的,为实际操作的等效效果图,当然第一桌面界面还显示检测过程中图片,即每执行一个步骤都拍摄一些图片显示在第一桌面界面上。同时,第一视频窗口视频直播样品的特性的检测步骤,如第一视频窗口视频直播检测样品的顺序、第一视频窗口视频直播检测样品的位置、第一视频窗口视频直播样品的特性变化情况等。同时,第一视频窗口还视频直播检测结果,即每检测一步骤就显示一个检测结果。当然,第一视频窗口视频直播的检测步骤都是用户实际操作步骤。值得注意的是,第一视频窗口可以是局部视频直播,即对检测端的某一台检测设备上进行视频直播,以看到检测端的某一台检测设备的操作及其对应的结果,第一视频窗口可以是全部视频直播,即对检测端的所有检测设备进行视频直播,以看到检测端的所有检测设备的操作及其对应的结果。
应理解,检测端的显示屏会同时出现第一桌面界面和第一视频窗口,其中第一桌面界面和第一视频窗口可以是位于显示屏上的两个不同区域,或者第一桌面界面占用整个显示屏的位置,且第一视频窗口属于第一桌面界面上的一个窗口。
应理解,在步骤S103中,第一桌面界面显示检测步骤和检测结果与第一视频窗口视频直播检测步骤和检测结果是同步的,这样能够通过第一桌面界面和第一视频窗口同步观察到检测步骤和检测结果。当然,在其他实施例中,
步骤S104:服务器根据预定规定对第一桌面界面所显示检测步骤和检测结果以及第一视频窗口上视频直播的检测步骤和检测结果进行处理后共享给客户端。
具体地,步骤S104包括以下子步骤:
a:服务器对检测端显示检测步骤和检测结果的第一桌面界面的内容进行部分删除、修改、增加或隐藏。
其中,上述步骤a具体包括删除、修改、增加或隐藏第一桌面界面的显示尺寸、清晰度以及内容。又或者改变第一桌面界面的内容的显示顺序和内容数据格式。当然也包括显示的图片。
b:服务器对检测端视频直播检测步骤和检测结果的第一视频窗口的内容进行部分删除、修改、增加或隐藏。
其中,上述步骤b具体包括删除、修改、增加或隐藏第一视频窗口的显示尺寸、清晰度以及内容。又或者改变第一视频窗口的内容的显示顺序和内容数据格式。当然也包括视频直播的图片。
c:服务器将部分删除、修改、增加或隐藏的第一桌面界面所显示的检测步骤和检测结果以及第一视频窗口所视频直播的检测步骤和检测结果共享给客户端。
也就是说,服务器的预定规定是根据实际要求特定设置的,通过预定规定,可以将检测端部分桌面界面的内容以及视频窗口的部分视频内容共享给客户端,让客户端可见,也可以将检测端剩下部分桌面界面的内容以及剩下部分视频内容不共享给客户端,让客户端不可见。举例而言,第一桌面界面显示第一数据、第二数据、第三数据和第四数据,经过服务器的删除或隐藏,第二桌面界面显示第一数据和第四数据;第一视频窗口视频直播第一数据、第二数据、第三数据和第四数据,经过服务器的增加或修改,第二视频窗口视频直播第一数据、第二数据、第三数据、第四数据、第五数据和第六数据。应理解,第一数据、第二数据、第三数据、第四数据、第五数据和第六数据可以包括检测过程的参数数据,也可以包括虚拟检测模拟图、虚拟等效效果图、每一步骤过程中的样品的图片或仪器操作的图片。
步骤S105:客户端的显示屏的第二桌面界面实时显示服务器所共享的检测步骤和检测结果以及客户端的显示屏的第二视频窗口实时视频直播服务器所共享的检测步骤和检测结果,以使得用户根据客户端的显示屏所显示的检测步骤和检测结果,通过语音方式告知操作人员所控制的检测端所执行的检测步骤是否正确,从而确定检测端是否成功检测样品的特性。
举例而言,用户查看到显示屏的第二桌面界面所显示检测步骤和检测结果和/或显示屏的第二视频窗口视频直播检测步骤和检测结果后,即用户可以查看第二桌面界面所显示的参数、虚拟检测模拟图、等效效果图、样品不同阶段的图片或仪器图片来判断操作人员所检测样品的步骤是否正确,以及通过第二视频窗口检测操作人员的检测步骤,并通过语音告知操作人员所控制的检测端所执行的检测步骤是否正确,如果正确,操作人员成功检测样品的特性,如果不正确,可以根据用户的要求进行改正。应理解,显示屏的第二视频窗口可以是播放服务器共享的检测步骤和检测结果的视频,不限定于直播现场视频。
应理解,在步骤S105中,客户端的显示屏的第二桌面界面实时显示服务器所共享的检测步骤和检测结果以及客户端的显示屏的第二视频窗口实时视频直播服务器所共享的检测步骤和检测结果的步骤之后,客户端发送控制指令至服务器,以使得客户端部分控制检测端执行检测步骤。即客户端设置有控制按键,用户可以通过操作该控制按键来发送控制指令至服务器,服务器在将该控制指令发送给检测端,检测端根据控制指令执行相对应的检测步骤。
应理解,在本实施例中,本发明的检测方法还包括:检测端的后台实时记录检测步骤和检测结果,以使得检测端的显示屏的第一桌面界面显示中断或检测端的显示屏的第一视频窗口视频直播中断后,检测端的后台仍然实时将第一桌面界面所显示检测步骤和检测结果以及第一视频窗口视频直播的检测步骤和检测结果共享给服务器。
应理解,第一桌面界面和第二桌面界面除了显示检测步骤和检测结果外,还显示操作人员的操作视频和检测端的仪器检测样品时所发出的声音,用户可以通过操作视频判断操作人员的操作是否正确,以及通过声音判断检测样品是否正确等。
如图2所示,图2是本发明远程虚拟交互检测系统的结构示意图。该系统包括检测端1、服务器2和客户端3。检测端1包括第一共享模块12、第一语音模块15、仪器检测模块13、第一显示模块14和第一视频窗口模块11,服务器2包括处理模块21,客户端3包括第二共享模块32、第二语音模块34、第二显示模块33和第二视频窗口模块31。
第一共享模块12用于与第二共享模块32建立数据共享通道,其中数据共享通道包括桌面界面共享通道、语音共享通道、视频共享通道或者其他共享通道。在本实施例中,第一共享模块12通过APP、网页登录、远程登录或自身软件与第二共享模块32建立数据共享通道。即用户端安装APP即可自行登录到检测端的共享通道,或者用户端自行从网页上登录到检测端的共享通道等。应理解,第一共享模块12与第二共享模块32两者建立数据共享通道后,客户端可以在其本身的显示屏中显示检测端的显示屏所显示的桌面界面的内容,同时客户端可以在其本身的显示屏中视频直播检测端的显示屏所视频直播的内容,即客户端与检测端两者的显示屏所显示的桌面界面的内容和视频直播的内容相同或者不同。
第一语音模块15用于与第二语音模块34进行语音信号传输。应理解,第一共享模块12与第二共享模块32建立数据共享通道后,第一语音模块15与第二语音模块34才可以进行语音信号传输。即客户端和检测端两者的语音信号传输的通道与数据共享通道相同。
仪器检测模块13用于根据操作指令执行检测步骤。其中操作指令为操作人员根据语音信号对检测端1所实施的控制指令,如客户端的用户语音告诉操作人员第一操作,则操作人员则在检测端上执行与第一操作相对应的步骤;如客户端的用户语音告诉操作人员第二操作,则操作人员则在检测端上执行与第二操作相对应的步骤。在本实施例中,检测步骤包括检测样品的特性的操作顺序,检测结果包括样品的受力变化程度、样品的裂缝程度、样品的元素构成、样品的元素比例或样品的耐温特性。
第一显示模块14用于显示第一桌面界面所显示检测步骤和检测结果。
第一视频窗口模块11用于视频直播检测步骤和检测结果。
第一共享模块12还用于实时将第一桌面界面所显示检测步骤和检测结果以及将第一视频窗口模块11视频直播的检测步骤和检测结果共享给服务器2。
应理解,第一桌面界面显示样品的特性的检测步骤,如第一桌面界面显示检测样品的顺序、第一桌面界面显示检测样品的位置、第一桌面界面显示样品的特性变化情况等。同时,第一桌面界面还显示检测结果,即每检测一步骤就显示一个检测结果。当然,第一桌面界面所显示的检测步骤都是虚拟的,为实际操作的等效效果图,当然第一桌面界面还显示检测过程中图片,即每执行一个步骤都拍摄一些图片显示在第一桌面界面上。同时,第一视频窗口模块11视频直播样品的特性的检测步骤,如第一视频窗口模块11视频直播检测样品的顺序、第一视频窗口模块11视频直播检测样品的位置、第一视频窗口模块11视频直播样品的特性变化情况等。同时,第一视频窗口模块11还视频直播检测结果,即每检测一步骤就显示一个检测结果。当然,第一视频窗口模块11视频直播的检测步骤都是用户实际操作步骤。
处理模块21用于根据预定规定对第一桌面界面所显示检测步骤和检测结果以及第一视频窗口模块11上视频直播的检测步骤和检测结果进行处理后共享给客户端3。
具体地,如图3所示,处理模块21包括桌面界面处理单元211、视频处理单元212和共享单元213。
桌面界面处理单元211用于对检测端显示检测步骤和检测结果的第一桌面界面的内容进行部分删除、修改、增加或隐藏。具体包括删除、修改、增加或隐藏第一桌面界面的显示尺寸、清晰度以及内容。又或者改变第一桌面界面的内容的显示顺序和内容数据格式。当然也包括显示的图片。
视频处理单元212用于对检测端视频直播检测步骤和检测结果的第一视频窗口的内容进行部分删除、修改、增加或隐藏。具体包括删除、修改、增加或隐藏第一视频窗口的显示尺寸、清晰度以及内容。又或者改变第一视频窗口的内容的显示顺序和内容数据格式。当然也包括视频直播的图片。
共享单元213用于将部分删除、修改、增加或隐藏的第一桌面界面所显示的检测步骤和检测结果以及第一视频窗口所视频直播的检测步骤和检测结果共享给客户端3。
也就是说,处理模块21的预定规定是根据实际要求特定设置的,通过预定规定,可以将检测端部分桌面界面的内容以及视频窗口的部分视频内容共享给客户端共享给客户端,让客户端可见,也可以将检测端剩下部分桌面的内容以及剩下部分视频内容不共享给客户端,让客户端不可见。举例而言,第一桌面界面显示第一数据、第二数据、第三数据和第四数据,经过服务器的删除或隐藏,第二桌面界面显示第一数据和第四数据;第一视频窗口视频直播第一数据、第二数据、第三数据和第四数据,经过服务器的增加或修改,第二视频窗口视频直播第一数据、第二数据、第三数据、第四数据、第五数据和第六数据。应理解,第一数据、第二数据、第三数据、第四数据、第五数据和第六数据可以包括检测过程的参数数据,也可以包括虚拟检测模拟图、虚拟等效效果图、每一步骤过程中的样品的图片或仪器操作的图片。
第二显示模块33用于通过第二桌面界面实时显示服务器2所共享的检测步骤和检测结果,第二视频窗口模块31用于实时视频直播服务器所共享的检测步骤和检测结果,以使得用户根据客户端3的显示屏所显示的检测步骤额检测结果,通过语音方式告知操作人员所控制的检测端1所执行的检测步骤是否正确,从而确定检测端1是否成功检测样品的特性。
举例而言,用户查看到显示屏的第二桌面界面所显示检测步骤和检测结果和/或显示屏的第二视频窗口视频直播检测步骤和检测结果后,即用户可以查看第二桌面界面所显示的参数、虚拟检测模拟图、等效效果图、样品不同阶段的图片或仪器图片来判断操作人员所检测样品的步骤是否正确,,以及通过第二视频窗口检测操作人员的检测步骤,并通过语音告知操作人员所控制的检测端所执行的检测步骤是否正确,如果正确,操作人员成功检测样品的特性,如果不正确,可以根据用户的要求进行改正。
在本实施例中,数据共享通道所共享的内容可根据检测端1的检测人员的不同需要,可以是让客户端3观察到桌面界面或视频直播中所显示的检测过程中的操作过程、所显示检测过程中的微小操作、所显示检测的现场环境以及所显示检测人员与客户端3的客户面对面进行交流。
应理解,在本实施例中,客户端还包括控制模块35,用于发送控制指令至服务器2,以使得客户端3部分控制检测端1执行检测步骤,即客户端3通过控制模块35向检测端1发送操作指令,检测端1根据客户端3发送过来的操作指令进行处理操作,使仪器检测模块13根据操作指令执行检测步骤,对样品进行检测。且期间所产生的检测步骤和检测结果通过第一显示模块14上显示。另外,检测端1还包括后台记录模块16,用于在检测端1的后台实时记录检测步骤和检测结果,以使得检测端的显示屏的第一桌面界面显示中断或检测端的显示屏的第一视频窗口视频直播中断后,检测端的后台仍然实时将第一桌面界面所显示检测步骤和检测结果以及第一视频窗口视频直播的检测步骤和检测结果共享给服务器。
应理解,第一桌面界面和第二桌面界面除了显示检测步骤和检测结果外,还显示操作人员的操作视频和检测端的仪器检测样品时所发出的声音,用户可以通过操作视频判断操作人员的操作是否正确,以及通过声音判断检测样品是否正确等。
综上,本发明提供的远程虚拟交互检测方法及系统将网络远程控制跟线下实际生产结合良好,给人们提供一种方便高效的工作模式,科学合理;利用现有资源网络,提供一种新颖的、方便的工作模式,给人们的工作和生活带来便利,能够使得用户不用在现场就可实现检测产品,有效提高了工作效率。
以上所述仅为本发明的实施方式,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。