CN103428472A - 一种基于协同感知的实物全交互交流沟通方法及其装置 - Google Patents
一种基于协同感知的实物全交互交流沟通方法及其装置 Download PDFInfo
- Publication number
- CN103428472A CN103428472A CN2012101553455A CN201210155345A CN103428472A CN 103428472 A CN103428472 A CN 103428472A CN 2012101553455 A CN2012101553455 A CN 2012101553455A CN 201210155345 A CN201210155345 A CN 201210155345A CN 103428472 A CN103428472 A CN 103428472A
- Authority
- CN
- China
- Prior art keywords
- master controller
- projected image
- client
- mark
- object based
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 title claims abstract description 30
- 238000000034 method Methods 0.000 title claims abstract description 24
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 16
- 230000008447 perception Effects 0.000 claims abstract description 16
- 230000006870 function Effects 0.000 claims description 10
- 238000002372 labelling Methods 0.000 abstract 2
- 230000002195 synergetic effect Effects 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
一种基于协同感知的实物全交互交流沟通方法，它包括如下步骤：①摄像头实时拍摄投影图像，并把投影图像传送给主控制器；②主控制器对投影图像进行处理后，发送给客户端，进而该投影图像显示在客户端的显示器上；③客户端根据显示器上的内容对其进行标记，同时客户端将标记命令发送给主控制器；④主控制器根据接到的标记命令，驱动投影仪投影出带标记的投影图像。本发明能够实现通信的双方在实物上协同的标注、感知和交流。例如：政府公务员远程办公时运用此装置，可以使用纸质的红头文件进行沟通，双方都可以在文件上标注、标记和指示，快捷的完成办公任务。所以本发明实现了远程办公，节省了成本，提高了人们的工作效率。
Description
技术领域
本发明涉及一种在协同工作中方便协同参与者相互交流沟通的方法及其装置。
背景技术
协同工作是人类社会解决各种复杂的问题，或完成各种大规模任务的一种重要和有效的工作方式，它通过一个团队中的多个成员的共同努力和合作完成任务。随着网络的发展，远程的协同工作逐渐由梦想变为了现实。协同感知就是让远程的协同工作更接近于真正的面对面沟通，能够极大提高协同沟通的效率，也是所有协同工作参与者的需要和理想。
当前的远程协同工作主要是通过视频会议加上电子白板的方式进行：协同的双方都在计算机屏幕或者投影屏幕上看到对方的视频以及对方计算机中的文档或者多媒体文件。现实当中，协同工作的一方可能会提供一些实物进行交流，例如：纸质文档、模型、手机、书法绘画作品等等。现有的“实物投影仪”仅仅能将实物图像显示在计算机或投影仪屏幕上，如果远程协同双方希望在实物上直接进行协同的标注和指示的时候，现有的装置和方法是无能为力的。
发明内容
本发明要解决的技术问题是：远程的协同参与者能够对同一实物进标记、指示、交流沟通的方法，并提供实施该方法所需要的交流沟通装置。
为实现上述目的，本发明采用以下技术方案：
一种基于协同感知的实物全交互交流沟通方法，包括如下步骤：
①、摄像头实时拍摄投影图像，并把投影图像传送给主控制器；
②、主控制器对投影图像进行处理后，发送给客户端，进而该投影图像显示在客户端的显示器上；
③、客户端根据显示器上的内容对其进行标记，同时客户端将标记命令发送给主控制器；
④、主控制器根据接到的标记命令，驱动投影仪投影出带标记的投影图像。
在步骤③中，客户端输入的标记触发客户端程序事件，该程序事件调用一函数，所述的函数是指将标记命令发送给主控制器的动作函数；在步骤④中，主控制根据接到的标记命令，在主控制器中检索标记命令相对应的标记动作，当检索到该标记动作后，驱动投影仪输出该标记动作，从而使投影仪输出带标记的投影图像。
所述的标记命令包括文字输出命令和几何图形输出命令，相对应地，标记动作包括文字输出和几何图形输出。
在步骤③中，客户端根据显示器上的内容利用鼠标或者触摸屏对其进行标记。
所述的主控制器和客户端通过Internet或局域网通信连接。
一种基于协同感知的实物全交互交流沟通装置，它包括将投影图像输出的投影仪和将投影图像输入的摄像头，所述的投影仪和摄像头均与主控制器相连接，主控制器与客户端通信连接，在客户端上连接有标记输入设备。
所述的主控制器包括与投影仪相连接的视频输出接口、与摄像头相连接的视频输入接口、对标记命令进行处理的指令处理单元和与客户端进行通信的通信单元。
所述的主控制器还连接有麦克风和扬声器；所述的客户端也连接有麦克风和扬声器。
所述的标记输入设备为鼠标或者触摸屏。
采用上述技术方案的本发明，基于协同感知的实物交流沟通装置能够实现通信的双方在实物上协同的标注、感知和交流。例如：政府公务员远程办公时运用此装置，可以使用纸质的红头文件进行沟通，双方都可以在文件上标注、标记和指示，快捷的完成办公任务。再如：电信运营商的客服人员运用此装置，可以直接在用户的手机上进行标记、指示，指导用户排除手机的故障或者使用手机的定制功能。所以本发明实现了远程办公，节省了成本，提高了人们的工作效率。
附图说明
图1为本发明的整体流程图。
图2为本发明中主控制器和客户端的通信流程图。
图3为本发明的整体原理框图。
具体实施方式
如图1所示，本发明包括如下步骤：
①、摄像头实时拍摄实物，生成投影图像，并把投影图像传送给主控制器。需要指出的是，本发明中的实物是指纸质文档（政府红头文件）、工艺品（古董等）、高端商品、手机等等；
②、主控制器对投影图像进行视频编码、压缩等处理后，通过Internet或局域网发送给客户端，进而该投影图像显示在客户端的显示器上；
③、客户端根据显示器上的内容利用鼠标或者触摸屏对该内容进行标记，同时客户端将标记命令发送给主控制器；
④、主控制器根据接到的标记命令，驱动投影仪投影出带标记的投影图像。
如图2所示，主控制器与客户端的处理方式为：在步骤③中，客户端输入的标记触发一个客户端程序事件，其中，标记可以为文字、描绘、图画等等，触发的程序事件则调用一函数，上述的函数是指将标记命令发送给主控制器的动作函数；在步骤④中，主控制根据接到的标记命令，在主控制器中检索标记命令相对应的标记动作，当检索到该标记动作后，驱动投影仪输出该标记动作，从而使投影仪输出带标记的投影图像。需要说明的是，上述的标记命令包括文字输出命令和几何图形输出命令，相对应地，标记动作包括文字输出和几何图形输出；几何图形包括横线、圈、三角等等。
如图3所示，装置，它包括将投影图像输出的投影仪和将投影图像输入的摄像头，上述的投影仪和摄像头均与主控制器相连接，主控制器与客户端通信连接，在客户端上连接有标记输入设备，标记输入设备为鼠标或者触摸屏。
主控制器包括与投影仪相连接的视频输出接口、与摄像头相连接的视频输入接口、对标记命令进行处理的指令处理单元和与客户端进行通信的通信单元。
为方便在图像交流标记信息时进行相应的语音交流，主控制器和客户端均连接有各自的麦克风和扬声器。
Claims (9)
1.一种基于协同感知的实物全交互交流沟通方法，其特征在于：它包括如下步骤：
①、摄像头实时拍摄投影图像，并把投影图像传送给主控制器；
②、主控制器对投影图像进行处理后，发送给客户端，进而该投影图像显示在客户端的显示器上；
③、客户端根据显示器上的内容对其进行标记，同时客户端将标记命令发送给主控制器；
④、主控制器根据接到的标记命令，驱动投影仪投影出带标记的投影图像。
2.根据权利要求1所述的基于协同感知的实物全交互交流沟通方法，其特征在于：在步骤③中，客户端输入的标记触发客户端程序事件，该程序事件调用一函数，所述的函数是指将标记命令发送给主控制器的动作函数；在步骤④中，主控制根据接到的标记命令，在主控制器中检索标记命令相对应的标记动作，当检索到该标记动作后，驱动投影仪输出该标记动作，从而使投影仪输出带标记的投影图像。
3.根据权利要求2所述的基于协同感知的实物全交互交流沟通方法，其特征在于：所述的标记命令包括文字输出命令和几何图形输出命令，相对应地，标记动作包括文字输出和几何图形输出。
4.根据权利要求2所述的基于协同感知的实物全交互交流沟通方法，其特征在于：在步骤③中，客户端根据显示器上的内容利用鼠标或者触摸屏对其进行标记。
5.根据权利要求1所述的基于协同感知的实物全交互交流沟通方法，其特征在于：所述的主控制器和客户端通过Internet或局域网通信连接。
6.实施权利要求1-5任一方法所需的基于协同感知的实物全交互交流沟通装置，其特征在于：它包括将投影图像输出的投影仪和将投影图像输入的摄像头，所述的投影仪和摄像头均与主控制器相连接，主控制器与客户端通信连接，在客户端上连接有标记输入设备。
7.根据权利要求6所述的基于协同感知的实物全交互交流沟通装置，其特征在于：所述的主控制器包括与投影仪相连接的视频输出接口、与摄像头相连接的视频输入接口、对标记命令进行处理的指令处理单元和与客户端进行通信的通信单元。
8.根据权利要求6所述的基于协同感知的实物全交互交流沟通装置，其特征在于：所述的主控制器还连接有麦克风和扬声器；所述的客户端也连接有麦克风和扬声器。
9.根据权利要求6所述的基于协同感知的实物全交互交流沟通装置，其特征在于：所述的标记输入设备为鼠标或者触摸屏。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210155345.5A CN103428472B (zh) | 2012-05-18 | 2012-05-18 | 一种基于协同感知的实物全交互交流沟通方法及其装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210155345.5A CN103428472B (zh) | 2012-05-18 | 2012-05-18 | 一种基于协同感知的实物全交互交流沟通方法及其装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103428472A true CN103428472A (zh) | 2013-12-04 |
| CN103428472B CN103428472B (zh) | 2016-08-10 |
Family
ID=49652570
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210155345.5A Expired - Fee Related CN103428472B (zh) | 2012-05-18 | 2012-05-18 | 一种基于协同感知的实物全交互交流沟通方法及其装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103428472B (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015180653A1 (en) * | 2014-05-27 | 2015-12-03 | Mediatek Inc. | Systems for providing image or video to be displayed by projective display system and for displaying or projecting image or video by a projective display system |
| CN108055559A (zh) * | 2018-01-24 | 2018-05-18 | 上海哇嗨网络科技有限公司 | 通过移动客户端实现摄像头投屏的方法、投屏装置及系统 |
| CN109495713A (zh) * | 2018-11-13 | 2019-03-19 | 视联动力信息技术股份有限公司 | 一种基于视联网的视频会议控制方法和装置 |
| CN111757074A (zh) * | 2019-03-29 | 2020-10-09 | 福建天泉教育科技有限公司 | 一种影像共享标注系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040070674A1 (en) * | 2002-10-15 | 2004-04-15 | Foote Jonathan T. | Method, apparatus, and system for remotely annotating a target |
| CN101009818A (zh) * | 2006-01-26 | 2007-08-01 | 富士施乐株式会社 | 远程指示系统、远程指示方法和远程指示用程序产品 |
| CN101262586A (zh) * | 2007-03-06 | 2008-09-10 | 富士施乐株式会社 | 信息共享支持系统、信息处理装置和计算机控制方法 |
| CN101667061A (zh) * | 2009-09-08 | 2010-03-10 | 广东工业大学 | 一种交互式投影的检测系统及其检测方法 |
-
2012
- 2012-05-18 CN CN201210155345.5A patent/CN103428472B/zh not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040070674A1 (en) * | 2002-10-15 | 2004-04-15 | Foote Jonathan T. | Method, apparatus, and system for remotely annotating a target |
| CN101009818A (zh) * | 2006-01-26 | 2007-08-01 | 富士施乐株式会社 | 远程指示系统、远程指示方法和远程指示用程序产品 |
| CN101262586A (zh) * | 2007-03-06 | 2008-09-10 | 富士施乐株式会社 | 信息共享支持系统、信息处理装置和计算机控制方法 |
| CN101667061A (zh) * | 2009-09-08 | 2010-03-10 | 广东工业大学 | 一种交互式投影的检测系统及其检测方法 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015180653A1 (en) * | 2014-05-27 | 2015-12-03 | Mediatek Inc. | Systems for providing image or video to be displayed by projective display system and for displaying or projecting image or video by a projective display system |
| US10136114B2 (en) | 2014-05-27 | 2018-11-20 | Mediatek Inc. | Projection display component and electronic device |
| CN108055559A (zh) * | 2018-01-24 | 2018-05-18 | 上海哇嗨网络科技有限公司 | 通过移动客户端实现摄像头投屏的方法、投屏装置及系统 |
| CN109495713A (zh) * | 2018-11-13 | 2019-03-19 | 视联动力信息技术股份有限公司 | 一种基于视联网的视频会议控制方法和装置 |
| CN111757074A (zh) * | 2019-03-29 | 2020-10-09 | 福建天泉教育科技有限公司 | 一种影像共享标注系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103428472B (zh) | 2016-08-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106548517B (zh) | 基于增强现实技术进行视频会议的方法及装置 | |
| US10250946B2 (en) | Meeting system that interconnects group and personal devices across a network | |
| CN109388329A (zh) | 远程批注同步的方法与系统 | |
| CN102693047B (zh) | 在协同环境中显示数字信息和图像的方法 | |
| CN105431818B (zh) | 用于电子墨水投影的方法和系统 | |
| Irlitti et al. | Challenges for asynchronous collaboration in augmented reality | |
| WO2013121455A1 (ja) | プロジェクタ、図形入力・表示装置、携帯端末およびプログラム。 | |
| CN107547554A (zh) | 一种基于增强现实的智能设备远程协助系统 | |
| CN104426939B (zh) | 一种信息处理方法及电子设备 | |
| CN110727361A (zh) | 一种信息交互方法、交互系统和应用 | |
| CN102968178B (zh) | 一种基于手势的ppt控制系统 | |
| CN103597468A (zh) | 用于视频通信系统中改进的交互式内容共享的系统和方法 | |
| CN104333574A (zh) | 电子白板同步方法和系统 | |
| CN103428472A (zh) | 一种基于协同感知的实物全交互交流沟通方法及其装置 | |
| CN103685869A (zh) | 一种演播室一体化联动播出控制的系统 | |
| CN107766024B (zh) | 一种基于拼接墙的ppt放映控制方法和系统 | |
| Avellino et al. | Camray: Camera arrays support remote collaboration on wall-sized displays | |
| EP2579588B1 (en) | Collaborative meeting systems that enable parallel multi-user input to mark up screens | |
| CN103150932A (zh) | 一种带有网络功能的视频实物展示系统及方法 | |
| CN107665139B (zh) | 用于在线教学中的实时双向绘制的实现方法及装置 | |
| CN110474948B (zh) | 一种网络设备之间的交互方法 | |
| Chantziaras et al. | An augmented reality-based remote collaboration platform for worker assistance | |
| JP6136206B2 (ja) | 会議システム、サーバ、及び、会議情報生成プログラム | |
| CN203276606U (zh) | 一种带有网络功能的视频实物展示系统 | |
| CN109144438A (zh) | 基于数字光学点阵的会议通讯方法、装置、介质及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C53 | Correction of patent of invention or patent application | ||
| CB02 | Change of applicant information |
Address after: 450001 Henan Province, Zhengzhou high tech Zone Chuk Street No. 6, 863 Software Park Building No. 8 Applicant after: ZHENGZHOU IMAN TECHNOLOGY DEVELOPMENT Co.,Ltd. Address before: Bamboo high tech Development Zone in Henan province 450001 Zhengzhou Street No. 1 building 55 Applicant before: ZHENGZHOU IMAN TECHNOLOGY DEV Co.,Ltd. |
|
| COR | Change of bibliographic data |
Free format text: CORRECT: APPLICANT; FROM: ZHENGZHOU IMAN TECHNOLOGY DEVELOPMENT CO., LTD. TO: ZHENGZHOU IMAN TECHNOLOGY DEVELOPMENT CO., LTD. |
|
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160810 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |