CN104243898A - 远程指导系统及其指导终端、求助终端 - Google Patents

远程指导系统及其指导终端、求助终端 Download PDF

Info

Publication number
CN104243898A
CN104243898A CN201310239241.7A CN201310239241A CN104243898A CN 104243898 A CN104243898 A CN 104243898A CN 201310239241 A CN201310239241 A CN 201310239241A CN 104243898 A CN104243898 A CN 104243898A
Authority
CN
China
Prior art keywords
terminal
situ
module
projection
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310239241.7A
Other languages
English (en)
Inventor
王士承
蔡亦文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Original Assignee
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hongfujin Precision Industry Shenzhen Co Ltd, Hon Hai Precision Industry Co Ltd filed Critical Hongfujin Precision Industry Shenzhen Co Ltd
Priority to CN201310239241.7A priority Critical patent/CN104243898A/zh
Publication of CN104243898A publication Critical patent/CN104243898A/zh
Pending legal-status Critical Current

Links

Abstract

一种指导终端用于远程指导。指导终端包括用于与求助终端进行通讯的传输模块。指导终端还包括:投影模块,用于将接收到的现场图像投影在指导终端所在现场的一物体上,而在该物体上形成对应求助终端所在现场的现场物体的一现场物体投影;摄像模块,用于获取对应指导终端的用户的指导动作的指导图像;图像识别模块,用于识别指导图像中的指导动作,以找出该指导动作所指的该现场物体投影上的一标的位置,并根据该标的位置产生指导信息,传输模块将所述指导信息传输到求助终端。本发明还提供了一种远程指导系统及求助终端。

Description

远程指导系统及其指导终端、求助终端
技术领域
本发明涉及一种远程指导系统及其指导终端、求助终端。
背景技术
在一些紧急事件出现时,如火灾,处于现场的人可能因为缺乏对应的专业知识不能对现场作出相应的处理,如操作某专业设备,从而不能进行救助,给生命财产带来损害。
发明内容
有鉴于此,本发明提供了一种远程指导系统及其指导终端、求助终端,使求助终端的用户借助指导终端传送的指导信息进行救助。
一种远程指导系统,包括用于远程指导的指导终端及用于接收远程指导的求助终端,指导终端包括用于与求助终端进行通讯的传输模块,求助终端包括用于与指导终端进行通讯的传输模块,及用于获取对应求助终端所在现场的现场物体的现场图像的摄像模块。指导终端还包括:投影模块,用于将接收到的现场图像投影在指导终端所在现场的一物体上,而在该物体上形成对应该现场物体的一现场物体投影;摄像模块,用于获取对应指导终端的用户的指导动作的指导图像;图像识别模块,用于识别指导图像中的指导动作,以找出该指导动作所指的该现场物体投影上的一标的位置,并根据该标的位置产生指导信息。求助终端还包括:可见激光模块,用于发射可见激光;控制模块,用于根据获得的指导信息控制可见激光模块将可见激光投射于求助终端所在现场的该现场物体上。
一种指导终端,用于远程指导,该指导终端包括用于与求助终端进行通讯的传输模块。指导终端还包括:投影模块,用于将接收到的现场图像投影在指导终端所在现场的一物体上,而在该物体上形成对应求助终端所在现场的现场物体的一现场物体投影;摄像模块,用于获取对应指导终端的用户的指导动作的指导图像;图像识别模块,用于识别指导图像中的指导动作,以找出该指导动作所指的该现场物体投影上的一标的位置,并根据该标的位置产生指导信息,传输模块将所述指导信息传输到求助终端。
一种求助终端,包括用于与指导终端进行通讯的传输模块,及用于获取对应求助终端所在现场的现场物体的现场图像的摄像模块。还包括:可见激光模块,用于发射可见激光;控制模块,用于根据从指导终端获得的指导信息控制可见激光模块将可见激光投射于求助终端所在现场的该现场物体上。
上述求助终端将其所处的现场图像传送给指导终端,指导终端将来自求助终端的现场图像投影使得指导终端的用户可利用投影图像进行指导并据以产生指导信息。求助终端的可见激光模块将可见激光投射于求助终端所在现场的对应物体上,从而使得求助终端的用户可直观的在现成的物体上得到指导信息,帮助求助终端的用户进行救助。
附图说明
图1为本发明远程指导系统的模块图。
图2为图1中的求助终端发送现场图像给指导终端的示意图。
图3为图1中的指导终端发送指导信息给求助终端的示意图。
主要元件符号说明
远程指导系统 30
指导终端 50
求助终端 10
摄像模块 12、56
传输模块 14、62
投影模块 54、26
图像识别模块 60
控制模块 20
可见激光模块 22
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
请同时参阅图1至图3,远程指导系统30包括用于远程指导的指导终端50及用于接收远程指导的求助终端10。所述指导终端50与求助终端10通过网络100进行通讯,如无线通信网络,可用于传输影像、声音等数据。在本实施例中,指导终端50及求助终端10皆为便携式设备。
该求助终端10包括摄像模块12、传输模块14、控制模块20、可见激光模块22及投影模块26。摄像模块12可包括摄像机,用于获取现场图像I1。该现场图像I1对应于求助终端10所在现场的现场物体200(如火警总机的控制板),而包括现场物体200的影像的至少一部分。在本实施例中,该现场图像I1为视频中的帧,摄像模块12周期性地获取该现场图像I1。传输模块14用于通过网络100与指导终端50进行通讯并将现场图像I1传输至指导终端50。
指导终端50包括投影模块54、摄像模块56、图像识别模块60及传输模块62。投影模块54用于接收现场图像I1并将接收到的现场图像I1投影在指导终端50所在现场的一物体300(如墙壁)上,而在该物体300上形成对应该现场物体200的一现场物体投影P,使指导终端50的用户可观看该现场图像I1的内容。指导终端50的用户可利用该现场物体投影P进行相关指导。所述相关指导包括用户以手势等身体姿态或激光笔等辅助工具进行的指导动作A。摄像模块56可包括摄像机,用于获取指导终端50的用户进行指导的指导图像I2,该指导图像I2包括该指导动作A的影像。在本实施例中,该指导图像I2为视频中的帧,摄像模块56周期性地获取该指导图像I2。图像识别模块60用于识别指导图像I2中的指导动作A,以找出该指导动作A所指的一标的位置L1。该标的位置L1为该现场物体投影P上的一个位置。并根据该标的位置L1产生一指导信息。传输模块62用于将所述指导信息传输到求助终端10。
在本实施例中,图像识别模块60从该指导图像I2中撷取一现场物体投影截图,该现场物体投影截图包括该现场物体投影P的影像。该指导信息包括所述现场物体投影截图及所述标的位置L1。所述标的位置L1为所述现场物体投影截图上的一坐标。
求助终端10的传输模块14还用于从指导终端50接收指导信息。求助终端10的控制模块20用于根据指导信息控制可见激光模块22将可见激光V投射于求助终端10所在现场的现场物体200上。
在本实施例中,求助终端10的摄像模块12获取新的该现场图像I1后,求助终端10的控制模块20从新获取的该现场图像I1中撷取对应该现场物体200的一现场物体截图,并比较所述指导信息中的所述现场物体投影截图及所述现场物体截图,以找出该现场物体200上的一投射位置L2,该投射位置L2与该现场物体投影P上的该标的位置L1相对应。控制模块20控制可见激光模块22将可见激光V投射于该投射位置L2。藉由比较所述现场物体投影截图S1及所述现场物体截图S2找出该投射位置L2,可补偿求助终端10有移位时的误差。
此外,在本实施例中,求助终端10的传输模块14还从指导终端50接收指导图像I2。投影模块26用于将指导图像I2投影在求助终端10所在现场的一物体上,使求助终端10的用户可观看该指导图像I2的内容。
在其他实施例中,指导信息可仅包括所述标的位置L1。求助终端10还包括位置识别单元,用于识别求助终端10的位置,并据以产生包括求助终端10的位置的位置信息。位置识别单元可包括电子罗盘和加速度器等可判断方向、角度、位移等位置信息的传感器。当求助终端10的摄像模块12获取该现场图像I1时,位置识别单元取得第一位置信息。当从指导终端50接收到指导信息时,位置识别单元取得第二位置信息。求助终端10的控制模块20比较所述第一位置信息及第二位置信息,以根据所述第一位置信息及第二位置信息的差异找出该现场物体200上的该投射位置L2,藉以补偿求助终端10有移位时的误差。
指导信息还可包括音频、文字等其他数据,如指导终端50的用户进行相关指导时的声音的音频数据,藉以辅助相关指导的进行。
上述求助终端10将其所处的现场图像传送给指导终端50,指导终端50将来自求助终端10的现场图像投影使得指导终端50的用户可利用投影图像进行指导并据以产生指导信息。求助终端10的可见激光模块22将可见激光V投射于求助终端10所在现场的对应物体上,从而使得求助终端10的用户可直观的在现场的物体上得到指导信息,帮助求助终端10的用户进行救助。

Claims (10)

1.一种远程指导系统,包括用于远程指导的指导终端及用于接收远程指导的求助终端,指导终端包括用于与求助终端进行通讯的传输模块,求助终端包括用于与指导终端进行通讯的传输模块,及用于获取对应求助终端所在现场的现场物体的现场图像的摄像模块,其特征在于,指导终端还包括:
投影模块,用于将接收到的现场图像投影在指导终端所在现场的一物体上,而在该物体上形成对应该现场物体的一现场物体投影;
摄像模块,用于获取对应指导终端的用户的指导动作的指导图像;及
图像识别模块,用于识别指导图像中的指导动作,以找出该指导动作所指的该现场物体投影上的一标的位置,并根据该标的位置产生指导信息;
求助终端还包括:
可见激光模块,用于发射可见激光;及
控制模块,用于根据获得的指导信息控制可见激光模块将可见激光投射于求助终端所在现场的该现场物体上。
2.如权利要求1所述的远程指导系统,其特征在于,所述图像识别模块从指导图像中撷取对应该现场物体投影的一现场物体投影截图,指导信息包括所述现场物体投影截图及所述标的位置,求助终端的摄像模块获取新的该现场图像后,控制模块从新获取的该现场图像中撷取对应该现场物体的一现场物体截图,比较所述指导信息中的所述现场物体投影截图及所述现场物体截图以找出对应该现场物体投影上的该标的位置的该现场物体上的一投射位置,并控制可见激光模块将该可见激光投射于该投射位置。
3.如权利要求2所述的远程指导系统,其特征在于,所述标的位置为所述现场物体投影截图上的一坐标。
4.如权利要求1所述的远程指导系统,其特征在于,所述指导信息包括所述标的位置,求助终端还包括一位置识别单元,用于识别求助终端的位置及角度并据以产生位置信息,当求助终端的摄像模块获取该现场图像时,位置识别单元取得第一位置信息,当求助终端接收到指导信息时,位置识别单元取得第二位置信息,控制模块比较所述第一位置信息及第二位置信息以找出对应该现场物体投影上的该标的位置的该现场物体上的一投射位置,并将该可见激光投射于该投射位置。
5.一种指导终端,用于远程指导,该指导终端包括用于与一求助终端进行通讯的传输模块,其特征在于,指导终端还包括:
投影模块,用于将接收到的现场图像投影在指导终端所在现场的一物体上,而在该物体上形成对应求助终端所在现场的现场物体的一现场物体投影;
摄像模块,用于获取对应指导终端的用户的指导动作的指导图像;及
图像识别模块,用于识别指导图像中的指导动作,以找出该指导动作所指的该现场物体投影上的一标的位置,并根据该标的位置产生指导信息,传输模块将所述指导信息传输到求助终端。
6.如权利要求5所述的指导终端,其特征在于,所述图像识别模块从指导图像中撷取对应该现场物体投影的一现场物体投影截图,指导信息包括所述现场物体投影截图及所述标的位置。
7.如权利要求6所述的远程指导系统,其特征在于,所述标的位置为所述现场物体投影截图上的一坐标。
8.一种求助终端,包括用于与一指导终端进行通讯的传输模块,及用于获取对应求助终端所在现场的现场物体的现场图像的摄像模块,其特征在于,还包括:
可见激光模块,用于发射可见激光;及
控制模块,用于根据从指导终端获得的指导信息控制可见激光模块将可见激光投射于求助终端所在现场的该现场物体上。
9.如权利要求8所述的求助终端,其特征在于,所述指导信息包括指导终端的用户的指导动作所指的现场物体投影上的一标的位置,该现场物体投影对应该现场物体,形成于指导终端所在现场的一物体上,求助终端还包括一位置识别单元,用于识别求助终端的位置并据以产生位置信息,当摄像模块获取该现场图像时,位置识别单元取得第一位置信息,当接收到指导信息时,位置识别单元取得第二位置信息,控制模块比较所述第一位置信息及第二位置信息以找出对应该现场物体投影上的该标的位置的该现场物体上的一投射位置,并控制可见激光模块将该可见激光投射于该投射位置。
10.如权利要求8所述的求助终端,其特征在于,所述控制模块还用于从所述摄像模块新获取的现场图像中撷取对应该现场物体的一现场物体截图,比较所述指导信息中的现场物体投影截图及所述现场物体截图以找出对应该现场物体投影截图上一标的位置的该现场物体上的一投射位置,并控制可见激光模块将该可见激光投射于该投射位置。
CN201310239241.7A 2013-06-18 2013-06-18 远程指导系统及其指导终端、求助终端 Pending CN104243898A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310239241.7A CN104243898A (zh) 2013-06-18 2013-06-18 远程指导系统及其指导终端、求助终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310239241.7A CN104243898A (zh) 2013-06-18 2013-06-18 远程指导系统及其指导终端、求助终端

Publications (1)

Publication Number Publication Date
CN104243898A true CN104243898A (zh) 2014-12-24

Family

ID=52231140

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310239241.7A Pending CN104243898A (zh) 2013-06-18 2013-06-18 远程指导系统及其指导终端、求助终端

Country Status (1)

Country Link
CN (1) CN104243898A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106169097A (zh) * 2015-05-21 2016-11-30 波音公司 远程先进的修复指导
CN108632273A (zh) * 2018-05-07 2018-10-09 全感(苏州)智能技术有限公司 一种远程作业指导系统
CN109274956A (zh) * 2018-08-14 2019-01-25 上海常仁信息科技有限公司 两点间机器人的互相立体投影通信系统和方法
CN110562653A (zh) * 2019-07-30 2019-12-13 国网浙江省电力有限公司嘉兴供电公司 基于泛在电力物联网的变电运检智慧决策系统及维护系统
CN110691217A (zh) * 2019-07-30 2020-01-14 国网浙江省电力有限公司嘉兴供电公司 一种用于智能运检的现场作业辅助装置
CN110718286A (zh) * 2019-09-11 2020-01-21 宁波江丰生物信息技术有限公司 一种远程取材指导装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040070674A1 (en) * 2002-10-15 2004-04-15 Foote Jonathan T. Method, apparatus, and system for remotely annotating a target
CN101009818A (zh) * 2006-01-26 2007-08-01 富士施乐株式会社 远程指示系统、远程指示方法和远程指示用程序产品
CN101098460A (zh) * 2006-06-28 2008-01-02 富士施乐株式会社 远程指示系统、远程指示方法及其程序产品
CN201903865U (zh) * 2010-11-15 2011-07-20 武汉工程大学 一种交互式投影仪
JP2012081194A (ja) * 2010-10-14 2012-04-26 Denso Corp 生体状態監視装置
CN102906671A (zh) * 2010-07-20 2013-01-30 松下电器产业株式会社 手势输入装置及手势输入方法
CN103717127A (zh) * 2011-02-17 2014-04-09 宜扬医疗有限公司 用于执行自动的且远程的由受过训练的人员指导的医学检查的系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040070674A1 (en) * 2002-10-15 2004-04-15 Foote Jonathan T. Method, apparatus, and system for remotely annotating a target
CN101009818A (zh) * 2006-01-26 2007-08-01 富士施乐株式会社 远程指示系统、远程指示方法和远程指示用程序产品
CN101098460A (zh) * 2006-06-28 2008-01-02 富士施乐株式会社 远程指示系统、远程指示方法及其程序产品
CN102906671A (zh) * 2010-07-20 2013-01-30 松下电器产业株式会社 手势输入装置及手势输入方法
JP2012081194A (ja) * 2010-10-14 2012-04-26 Denso Corp 生体状態監視装置
CN201903865U (zh) * 2010-11-15 2011-07-20 武汉工程大学 一种交互式投影仪
CN103717127A (zh) * 2011-02-17 2014-04-09 宜扬医疗有限公司 用于执行自动的且远程的由受过训练的人员指导的医学检查的系统及方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106169097A (zh) * 2015-05-21 2016-11-30 波音公司 远程先进的修复指导
CN106169097B (zh) * 2015-05-21 2022-01-14 波音公司 远程先进的修复指导
CN108632273A (zh) * 2018-05-07 2018-10-09 全感(苏州)智能技术有限公司 一种远程作业指导系统
CN109274956A (zh) * 2018-08-14 2019-01-25 上海常仁信息科技有限公司 两点间机器人的互相立体投影通信系统和方法
CN110562653A (zh) * 2019-07-30 2019-12-13 国网浙江省电力有限公司嘉兴供电公司 基于泛在电力物联网的变电运检智慧决策系统及维护系统
CN110691217A (zh) * 2019-07-30 2020-01-14 国网浙江省电力有限公司嘉兴供电公司 一种用于智能运检的现场作业辅助装置
CN110691217B (zh) * 2019-07-30 2021-04-06 国网浙江省电力有限公司嘉兴供电公司 一种用于智能运检的现场作业辅助装置
CN110718286A (zh) * 2019-09-11 2020-01-21 宁波江丰生物信息技术有限公司 一种远程取材指导装置

Similar Documents

Publication Publication Date Title
CN104243898A (zh) 远程指导系统及其指导终端、求助终端
US9332208B2 (en) Imaging apparatus having a projector with automatic photography activation based on superimposition
KR101917648B1 (ko) 단말 및 그 제어 방법
US20170347010A1 (en) Camera Peripheral Device for Supplemental Audio Capture and Remote Control of Camera
CN105450736B (zh) 与虚拟现实连接的方法和装置
WO2015192631A1 (zh) 视频会议系统及方法
CN104838642A (zh) 用创建者身份或场景标记媒体的方法和设备
US8478308B2 (en) Positioning system for adding location information to the metadata of an image and positioning method thereof
CN104469319A (zh) 一种图像采集与图像显示分离的方法及装置
CN108133181A (zh) 获取指示信息的方法、ar设备及存储介质
US10585638B2 (en) Terminal apparatus, output apparatus, and information processing system
KR20210079484A (ko) 인공지능 기반 애완동물 주변 영역을 이용한 애완동물의 감정 상태 증강 방법
JP2005303683A (ja) 画像送受信装置
JP5333546B2 (ja) 携帯端末装置、動画投稿方法及びプログラム
JP2006304066A (ja) 遠隔会議に用いられるサーバ、クライアントコンピュータ、撮像装置、制御方法及びプログラム
KR101728271B1 (ko) 정보 조회 방법, 장치, 프로그램 및 기록매체
CN111526295B (zh) 音视频处理系统、采集方法、装置、设备及存储介质
JP4934871B2 (ja) 撮影支援システム
JP2018037963A (ja) ウェアラブルカメラシステム及び録画制御方法
JP2006179984A (ja) 撮像システム及び撮像方法
US20120169899A1 (en) Electronic device and method for searching for object
US20140369664A1 (en) Imaging system, imaging device and program
US20140368678A1 (en) Remote guiding system, guiding terminal and seeking help terminal
KR101375724B1 (ko) 긴급구조 자동요청기능이 구비된 스마트장비 및 그 제어방법
KR101345657B1 (ko) 위치정보를 보정 가능한 스마트 방범 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141224

WD01 Invention patent application deemed withdrawn after publication