CN111789748A - 一种基于web远程视频协助视障人士出行方法 - Google Patents

一种基于web远程视频协助视障人士出行方法 Download PDF

Info

Publication number
CN111789748A
CN111789748A CN201910280183.XA CN201910280183A CN111789748A CN 111789748 A CN111789748 A CN 111789748A CN 201910280183 A CN201910280183 A CN 201910280183A CN 111789748 A CN111789748 A CN 111789748A
Authority
CN
China
Prior art keywords
user
state
video
customer service
stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910280183.XA
Other languages
English (en)
Inventor
汪小强
黄小瑰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangxi Shanxing Intelligent Equipment Manufacturing Co ltd
Original Assignee
Jiangxi Shanxing Intelligent Equipment Manufacturing Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangxi Shanxing Intelligent Equipment Manufacturing Co ltd filed Critical Jiangxi Shanxing Intelligent Equipment Manufacturing Co ltd
Priority to CN201910280183.XA priority Critical patent/CN111789748A/zh
Publication of CN111789748A publication Critical patent/CN111789748A/zh
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H3/00Appliances for aiding patients or disabled persons to walk about
    • A61H3/06Walking aids for blind persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61FFILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F9/00Methods or devices for treatment of the eyes; Devices for putting-in contact lenses; Devices to correct squinting; Apparatus to guide the blind; Protective devices for the eyes, carried on the body or in the hand
    • A61F9/08Devices or methods enabling eye-patients to replace direct visual perception by another kind of perception

Abstract

本发明涉及一种基于web远程视频协助视障人士出行方法,其通过在线客服通过语音提醒的方式帮助盲人出行,客服根据盲人所在的位置及所要去的目的地,客服通过Web端能够很清晰的看到用户的视频,然后通过了解到用户的目的地之后,通过地图和语音交流结合,指引用户到达目的地,在网络正常设备正常的情况下,都是完整的实现效果。

Description

一种基于web远程视频协助视障人士出行方法
技术领域
本发明涉及出行技术领域,尤其涉及一种基于web远程视频协助视障人士出行方法。
背景技术
据不完全统计,目前全国共有1700万的视力障碍人群。然而在信息化高速发展的今天,直播行业的火热,视频功能的发展,但是在社会上没有一款产品将该技术运用给盲人,盲人出行困难的问题还是很大。
发明内容
有鉴于此,提供一种帮助盲人出行的视频连麦功能,客服通过视频方便的帮助盲人出行的一种基于web远程视频协助视障人士出行方法。
一种基于web远程视频协助视障人士出行方法,其包括如下步骤:
S1、客服在使用系统在web端登录进入视频导航页面;
S2、客服像服务端发送请求设置个人的工作状态为空闲,等待用户接入;
S3、用户使用app设备,使用视频导航功能。像后台发送请求;
S4、后台分配客服,分配成功之后给用户和客服分配房间;
S5、客服端会有一个10秒轮询的ajax任务longPolling,一直给后台发送自己的ucid号,并从后台获取工作状态serverState,缓存状态sessionState,以及房间号chanelNo,当缓存状态为空的时候,用户退出到登录页,当用户工作状态serverState为0的时候表示用户现在是忙碌状态,当状态为2的时候,表示是空闲状态,等待客服接入,当状态为1的时候,表示现在有用户接入了,判断房间号是否为空,如果为空则停止后面的任务,直接调用方法,继续调用方法轮询,房间号不为空则先判断getZb(获取用户gps)的状态是不是为false,如果是,则将全局变量userToken(用户token)更新,然后将全局变量chanelNo更新,然后调用进入房间的join方法,且开始一个30秒的定时任务isGetZbTmOut,判断如果30秒之后getZb还是为空,则退出视频功能,重置前面的参数,重新开始等待客户接入;
S6、join方法中有4个回调,远程视频流已添加stream-added,远程视频流已订阅的回调stream-subscribed,远程视频流已关闭的回调stream-removed,对方已离开的回调peer-leave,和一个退出房间的方法leave;
S7、stream-added中会判断参数isFirstCat是不是第一次接入,如果是第一次,则弹窗提示客服,开始视频导航。继续判断getZb等于false,这启用方法logStart开始服务,并将getZb设置为true,启用getGPS方法.将界面的工作状态设置为工作中,将按钮显示状态的按钮变成不可点击。client.subscribe从服务器开始接受音视频流;
S8、服务开始功能会传ucid到后台,去获取用户的姓名name,年龄age,性别sex,残疾证号disabledNo,剩余服务时长remainderTm和服务开始时间serverStarTm,并启用setTime方法,根据返回值state来做判断,如果state等于2表示,有未完成的行程,则弹窗显示是否进入未完成行程,客服则会语音与用户沟通,是否继续刚刚没有完成的行程,继续则点击确定按钮,向后台发送请求,继续刚刚未完成的行程,点击取消这开启新的行程,当state等于1的时候,表示开始新的行程,判断firstTime为true时,则弹出提示,客户是第一次使用,请先指导客户使用此功能和注意事项,客服则需要通过语言向客户介绍怎么使用和注意事项。当state等于0,表示创建行程异常。退出视频功能;
S9、getGPS是一个1秒的ajax轮询任务,不断的去请求用户的位置,当getZb参数为false时则改循环结束;
S10、stream-subscribed回调成功,首先设置全局变量noVideo为true,然后将视频显示在页面中;
S11、stream-removed回调,首先将noVideo设置为false,然后启动定时任务isVideoTmOut,30秒之后去判断是不是还在连接,以及,视频是否正常传输,如果getZb为true,noVideo为false,则调用endVideo,并传参数3,表示将用户状态设置为空闲,然后调用exception,接着调用leave;
S12、peer-leave回调,首先判断视频流是否存在,然后让视频流停止,接着删除页面上的视频部分内容,然后调用endVideo(3)设置工作状态为空闲,后面继续调用exception,最后调用leave;
S13、首先会将用户状态设置为空闲,然后将关于客服部分的信息重置为空,然后清除定时任务,timer,remainderTimer,isVideoTmOut,isGetZbTmOut;将全局参数isFirstCat设置为true,将isJoinChanel设置为true,userToken将用户的token设置为空,将用户的经纬度lat,lng设置为0,然后调用clearMap,然后调用client.leave退出房间;
S14、如果app端断开连接,或者web端点击挂断功能,都会接受任务。然后客服工作状态会被重置为空闲,继续等待下一个用户接入。
相对于现有技术,本发明的有益效果为:适用在支持webRTC的浏览器中,技术要求使用https,客服使用web页面设置个人工作状态,等待用户使用,用户使用,web端获取用户的gps位置,视频流,通过语音帮助盲人用户出行,Web端能够很清晰的看到用户的视频,然后通过了解到用户的目的地之后,通过地图和语音交流结合,指引用户到达目的地,在网络正常设备正常的情况下,都是完整的实现效果。
具体实施方式
以下将结合具体实施例对本发明进行详细说明。
一种基于web远程视频协助视障人士出行方法,其包括如下步骤:
S1、客服在使用系统在web端登录进入视频导航页面;
S2、客服像服务端发送请求设置个人的工作状态为空闲,等待用户接入;
S3、用户使用app设备,使用视频导航功能。像后台发送请求;
S4、后台分配客服,分配成功之后给用户和客服分配房间;
S5、客服端会有一个10秒轮询的ajax任务longPolling,一直给后台发送自己的ucid号,并从后台获取工作状态serverState,缓存状态sessionState,以及房间号chanelNo,当缓存状态为空的时候,用户退出到登录页,当用户工作状态serverState为0的时候表示用户现在是忙碌状态,当状态为2的时候,表示是空闲状态,等待客服接入,当状态为1的时候,表示现在有用户接入了,判断房间号是否为空,如果为空则停止后面的任务,直接调用方法,继续调用方法轮询,房间号不为空则先判断getZb(获取用户gps)的状态是不是为false,如果是,则将全局变量userToken(用户token)更新,然后将全局变量chanelNo更新,然后调用进入房间的join方法,且开始一个30秒的定时任务isGetZbTmOut,判断如果30秒之后getZb还是为空,则退出视频功能,重置前面的参数,重新开始等待客户接入;
S6、join方法中有4个回调,远程视频流已添加stream-added,远程视频流已订阅的回调stream-subscribed,远程视频流已关闭的回调stream-removed,对方已离开的回调peer-leave,和一个退出房间的方法leave;
S7、stream-added中会判断参数isFirstCat是不是第一次接入,如果是第一次,则弹窗提示客服,开始视频导航。继续判断getZb等于false,这启用方法logStart开始服务,并将getZb设置为true,启用getGPS方法.将界面的工作状态设置为工作中,将按钮显示状态的按钮变成不可点击。client.subscribe从服务器开始接受音视频流;
S8、服务开始功能会传ucid到后台,去获取用户的姓名name,年龄age,性别sex,残疾证号disabledNo,剩余服务时长remainderTm和服务开始时间serverStarTm,并启用setTime方法,根据返回值state来做判断,如果state等于2表示,有未完成的行程,则弹窗显示是否进入未完成行程,客服则会语音与用户沟通,是否继续刚刚没有完成的行程,继续则点击确定按钮,向后台发送请求,继续刚刚未完成的行程,点击取消这开启新的行程,当state等于1的时候,表示开始新的行程,判断firstTime为true时,则弹出提示,客户是第一次使用,请先指导客户使用此功能和注意事项,客服则需要通过语言向客户介绍怎么使用和注意事项。当state等于0,表示创建行程异常。退出视频功能;
S9、getGPS是一个1秒的ajax轮询任务,不断的去请求用户的位置,当getZb参数为false时则改循环结束;
S10、stream-subscribed回调成功,首先设置全局变量noVideo为true,然后将视频显示在页面中;
S11、stream-removed回调,首先将noVideo设置为false,然后启动定时任务isVideoTmOut,30秒之后去判断是不是还在连接,以及,视频是否正常传输,如果getZb为true,noVideo为false,则调用endVideo,并传参数3,表示将用户状态设置为空闲,然后调用exception,接着调用leave;
S12、peer-leave回调,首先判断视频流是否存在,然后让视频流停止,接着删除页面上的视频部分内容,然后调用endVideo(3)设置工作状态为空闲,后面继续调用exception,最后调用leave;
S13、首先会将用户状态设置为空闲,然后将关于客服部分的信息重置为空,然后清除定时任务,timer,remainderTimer,isVideoTmOut,isGetZbTmOut;将全局参数isFirstCat设置为true,将isJoinChanel设置为true,userToken将用户的token设置为空,将用户的经纬度lat,lng设置为0,然后调用clearMap,然后调用client.leave退出房间;
S14、如果app端断开连接,或者web端点击挂断功能,都会接受任务。然后客服工作状态会被重置为空闲,继续等待下一个用户接入。
相对于现有技术,本发明的有益效果为:适用在支持webRTC的浏览器中,技术要求使用https,客服使用web页面设置个人工作状态,等待用户使用,用户使用,web端获取用户的gps位置,视频流,通过语音帮助盲人用户出行,Web端能够很清晰的看到用户的视频,然后通过了解到用户的目的地之后,通过地图和语音交流结合,指引用户到达目的地,在网络正常设备正常的情况下,都是完整的实现效果。
以上所揭露的仅为本发明一种较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (1)

1.一种基于web远程视频协助视障人士出行方法,其特征在于:包括如下步骤:
S1、客服在使用系统在web端登录进入视频导航页面;
S2、客服像服务端发送请求设置个人的工作状态为空闲,等待用户接入;
S3、用户使用app设备,使用视频导航功能;
像后台发送请求;
S4、后台分配客服,分配成功之后给用户和客服分配房间;
S5、客服端会有一个10秒轮询的ajax任务longPolling,一直给后台发送自己的ucid号,并从后台获取工作状态serverState,缓存状态sessionState,以及房间号chanelNo,当缓存状态为空的时候,用户退出到登录页,当用户工作状态serverState为0的时候表示用户现在是忙碌状态,当状态为2的时候,表示是空闲状态,等待客服接入,当状态为1的时候,表示现在有用户接入了,判断房间号是否为空,如果为空则停止后面的任务,直接调用方法,继续调用方法轮询,房间号不为空则先判断getZb(获取用户gps)的状态是不是为false,如果是,则将全局变量userToken(用户token)更新,然后将全局变量chanelNo更新,然后调用进入房间的join方法,且开始一个30秒的定时任务isGetZbTmOut,判断如果30秒之后getZb还是为空,则退出视频功能,重置前面的参数,重新开始等待客户接入;
S6、join方法中有4个回调,远程视频流已添加stream-added,远程视频流已订阅的回调stream-subscribed,远程视频流已关闭的回调stream-removed,对方已离开的回调peer-leave,和一个退出房间的方法leave;
S7、stream-added中会判断参数isFirstCat是不是第一次接入,如果是第一次,则弹窗提示客服,开始视频导航;
继续判断getZb等于false,这启用方法logStart开始服务,并将getZb设置为true,启用getGPS方法.将界面的工作状态设置为工作中,将按钮显示状态的按钮变成不可点击;
client.subscribe从服务器开始接受音视频流;
S8、服务开始功能会传ucid到后台,去获取用户的姓名name,年龄age,性别sex,残疾证号disabledNo,剩余服务时长remainderTm和服务开始时间serverStarTm,并启用setTime方法,根据返回值state来做判断,如果state等于2表示,有未完成的行程,则弹窗显示是否进入未完成行程,客服则会语音与用户沟通,是否继续刚刚没有完成的行程,继续则点击确定按钮,向后台发送请求,继续刚刚未完成的行程,点击取消这开启新的行程,当state等于1的时候,表示开始新的行程,判断firstTime为true时,则弹出提示,客户是第一次使用,请先指导客户使用此功能和注意事项,客服则需要通过语言向客户介绍怎么使用和注意事项;
当state等于0,表示创建行程异常;
退出视频功能;
S9、getGPS是一个1秒的ajax轮询任务,不断的去请求用户的位置,当getZb参数为false时则改循环结束;
S10、stream-subscribed回调成功,首先设置全局变量noVideo为true,然后将视频显示在页面中;
S11、stream-removed回调,首先将noVideo设置为false,然后启动定时任务isVideoTmOut,30秒之后去判断是不是还在连接,以及,视频是否正常传输,如果getZb为true,noVideo为false,则调用endVideo,并传参数3,表示将用户状态设置为空闲,然后调用exception,接着调用leave;
S12、peer-leave回调,首先判断视频流是否存在,然后让视频流停止,接着删除页面上的视频部分内容,然后调用endVideo(3)设置工作状态为空闲,后面继续调用exception,最后调用leave;
S13、首先会将用户状态设置为空闲,然后将关于客服部分的信息重置为空,然后清除定时任务,timer,remainderTimer,isVideoTmOut,isGetZbTmOut;将全局参数isFirstCat设置为true,将isJoinChanel设置为true,userToken将用户的token设置为空,将用户的经纬度lat,lng设置为0,然后调用clearMap,然后调用client.leave退出房间;
S14、如果app端断开连接,或者web端点击挂断功能,都会接受任务;
然后客服工作状态会被重置为空闲,继续等待下一个用户接入。
CN201910280183.XA 2019-04-09 2019-04-09 一种基于web远程视频协助视障人士出行方法 Pending CN111789748A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910280183.XA CN111789748A (zh) 2019-04-09 2019-04-09 一种基于web远程视频协助视障人士出行方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910280183.XA CN111789748A (zh) 2019-04-09 2019-04-09 一种基于web远程视频协助视障人士出行方法

Publications (1)

Publication Number Publication Date
CN111789748A true CN111789748A (zh) 2020-10-20

Family

ID=72805145

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910280183.XA Pending CN111789748A (zh) 2019-04-09 2019-04-09 一种基于web远程视频协助视障人士出行方法

Country Status (1)

Country Link
CN (1) CN111789748A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101483806A (zh) * 2009-02-24 2009-07-15 南京师范大学 面向视障人群的户外导盲服务系统及方法
CN102186141A (zh) * 2011-05-06 2011-09-14 中国华录集团有限公司 基于gps和3g网络的盲人导航服务系统
CN203524952U (zh) * 2013-10-11 2014-04-09 陈育聪 一种基于视频通讯的导盲系统
CN105167967A (zh) * 2015-09-14 2015-12-23 深圳市冠旭电子有限公司 一种导盲方法及系统
CN108478398A (zh) * 2018-05-17 2018-09-04 中兴健康科技有限公司 人工导盲系统及导盲方法
CN108743266A (zh) * 2018-06-29 2018-11-06 合肥思博特软件开发有限公司 一种盲人智能导航避障出行辅助方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101483806A (zh) * 2009-02-24 2009-07-15 南京师范大学 面向视障人群的户外导盲服务系统及方法
CN102186141A (zh) * 2011-05-06 2011-09-14 中国华录集团有限公司 基于gps和3g网络的盲人导航服务系统
CN203524952U (zh) * 2013-10-11 2014-04-09 陈育聪 一种基于视频通讯的导盲系统
CN105167967A (zh) * 2015-09-14 2015-12-23 深圳市冠旭电子有限公司 一种导盲方法及系统
CN108478398A (zh) * 2018-05-17 2018-09-04 中兴健康科技有限公司 人工导盲系统及导盲方法
CN108743266A (zh) * 2018-06-29 2018-11-06 合肥思博特软件开发有限公司 一种盲人智能导航避障出行辅助方法及系统

Similar Documents

Publication Publication Date Title
US10171664B2 (en) Customer care mobile application
US10122858B2 (en) System and method for interacting with customer contact center over a mobile device
US7529540B2 (en) Method and system for invoking push-to-service offerings
US20170288943A1 (en) Supplying Context Data to a Servicing Entity
WO2017172650A1 (en) Portal for provisioning autonomous software agents
US20170289070A1 (en) Making a Dialogue Available To an Autonomous Software Agent
US20140245143A1 (en) Mobile expert desktop
US20170289069A1 (en) Selecting an Autonomous Software Agent
CN113179414A (zh) 直播互动方法、装置、设备及存储介质
CN109698963A (zh) 一种直播方法、装置、电子设备及可读存储介质
CN102739880A (zh) 基于移动互联网的可视化电话导航方法
US20100306153A1 (en) Rule based multimedia communication system on web pages
US20150363787A1 (en) Hangout based video response unit for contact centers
CN111789748A (zh) 一种基于web远程视频协助视障人士出行方法
US7542561B1 (en) Method and system for queuing calls based on call time commitment
US7206386B2 (en) Method and system for electronic communication with the hearing impaired
CN114518918A (zh) 一种数据处理方法、装置、设备及存储介质
JP2006197251A (ja) 会議運営支援方法
AU2007203125B2 (en) Method of using VOIP for callback from an ACD
KR20030074025A (ko) 인터넷을 통신망으로 이용하는 화상 전화 시스템 및 이를위한 셋탑박스
US10902471B2 (en) Voice assistant generated advertisement for a vehicle system and method thereof
CN111901486A (zh) 语音通话处理方法、装置、电子设备
JP2008141388A (ja) サービス提供システムおよびサービス提供方法
WO2001086526A1 (fr) Appareil et procede de vente aux encheres
JP2003504973A (ja) 通信を確立する方法および装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination