CN106339193B - 一种无线手持交互方法及手持交互式多媒体系统 - Google Patents

一种无线手持交互方法及手持交互式多媒体系统 Download PDF

Info

Publication number
CN106339193B
CN106339193B CN201610781930.4A CN201610781930A CN106339193B CN 106339193 B CN106339193 B CN 106339193B CN 201610781930 A CN201610781930 A CN 201610781930A CN 106339193 B CN106339193 B CN 106339193B
Authority
CN
China
Prior art keywords
handheld
multimedia
terminal
unit
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610781930.4A
Other languages
English (en)
Other versions
CN106339193A (zh
Inventor
师明义
肖家波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Samho Education Technology Co ltd
Original Assignee
Wuhan Samho Education Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Samho Education Technology Co ltd filed Critical Wuhan Samho Education Technology Co ltd
Priority to CN201610781930.4A priority Critical patent/CN106339193B/zh
Publication of CN106339193A publication Critical patent/CN106339193A/zh
Application granted granted Critical
Publication of CN106339193B publication Critical patent/CN106339193B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0383—Signal control means within the pointing device

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明涉及一种无线手持交互方法及手持交互式多媒体系统，用于实现手持终端与多媒体终端的交互，所述方法包括以下步骤：S1、手持终端通过UDP广播协议，自动发出数据包，多媒体终端接收数据包并进行匹配；S2、多媒体终端通过Remoting在手持终端创建一个远程对象，截取当前手持终端屏幕并转换成二进制数据，并回传给多媒体终端，多媒体终端接收到回传的数据解码转换成图片显示出来；S3、通过remoting在多媒体终端上创建一个远程对象，用来响应手持终端的按键事件与鼠标事件，手持终端模拟笔记本触摸板对多媒体终端进行远程控制。

Description

一种无线手持交互方法及手持交互式多媒体系统
技术领域
本发明涉及多媒体教学技术领域，更具体的说，是涉及一种无线手持交互方法及手持交互式多媒体系统。
背景技术
随着科技产品开始引入教育领域，教育市场一直是各大厂商争夺的重点。近年来，随着交互式多媒体机的发展和成熟，多功能的应用、强大的人机交互功能为教学提供了诸多方便，越来越多的教育机构已经开始从选择传统电子白板倾向于交互式一体机。
交互式多媒体教学一体机基于内置电脑，并结合先进的交互式电子白板科技。创造性的将中控、电脑、音响、投影仪、电子白板五大硬件合而为一。充分满足现代教学应用需求，一举解决当前多媒体教室各种设备分散、连接杂乱、操作繁琐、设备协调与兼容性差等问题，方便广大教师轻松自如地开展多媒体教学，丰富教学手段，拓展教学表现形式，让常态课堂教学动感起来，激发学生学习兴趣与互动参与，提升课堂教学的质量与效率。
交互式多媒体教学一体机又可作为教育信息化的基础教学平台，既有效解决了大尺寸显示难题，又实现了最佳书写效果。尤其适合教育信息基础薄弱的城乡、农村地区的广大中小学校，一机多用(白板教学、音视频播放、实物展示等)，便捷易用(集成面板控制，一键式开关等)，经济实用(比传统多媒体设备、平板电视等具有更高的性价比等)，缩小城乡教育“数字鸿沟”，提高区域教育信息化整体水平，有效促进教育均衡化发展。
发明内容
有鉴于此，有必要针对上述问题，提供一种无线手持交互方法及手持交互式多媒体系统，链接耗时少、通信稳定，解决了现有手动操作、对设备环境依赖性差、使用步骤繁琐等问题。
为了实现上述目的，本发明的技术方案如下：
一种无线手持交互方法，用于实现手持终端与多媒体终端的交互，包括以下步骤：
S1、手持终端通过UDP广播协议，自动发出数据包，多媒体终端接收数据包并进行匹配；
S2、多媒体终端通过Remoting在手持终端创建一个远程对象，截取当前手持终端屏幕并转换成二进制数据，并回传给多媒体终端，多媒体终端接收到回传的数据解码转换成图片显示出来；
S3、通过remoting在多媒体终端上创建一个远程对象，用来响应手持终端的按键事件与鼠标事件，手持终端模拟笔记本触摸板对多媒体终端进行远程控制。
作为优选的，在步骤S1中，所述多媒体终端通过数据包匹配实现手持终端注册，并将匹配通过的数据包放入连接列表，当连接列表为空时，自动连接第一台设备。
作为优选的，所述多媒体终端通过关闭再重新注册通道切换连接对象。
作为优选的，所述步骤S2还包括，暂停数据接收，并通过GUI技术进行批注。
作为优选的，所述步骤S3具体包括：
调用本地软件；
通过Afroge框架里的库与资源，调用、控制、设置摄像头；
操作手持终端拍下的照片，实现上下页、翻转、缩放。
一种手持交互式多媒体系统，包括多媒体一体机单元和手持交互单元；所述手持交互单元连接多媒体一体机单元，所述手持交互单元采用上述的方法对多媒体一体机单元进行远程控制和同屏显示。
作为优选的，还包括一WiFi模块，用于连接多媒体一体机单元和手持交互单元。
作为优选的，还包括主机端交互单元，所述主机交互单元分别设于多媒体一体机单元和手持交互单元内，用于实现手持交互单元对多媒体一体机单元的远程控制及同屏显示。
与现有技术相比，本发明的有益效果在于：
1、实现自动链接交互的高效率：本发明采用专用的软件代码设计，链接耗时少、通信稳定，解决了现有手动操作、对设备环境依赖性差、使用步骤繁琐等问题；
2、使用方便：老师可以自由在教室内走动，轻松解决了老师和学生沟通少的问题；
3、扩展性强：本发明技术可适用于平台和工具模块进行对接，可以通过手持交互模式输出对应的方式，实现更多平台资源的使用。
附图说明
图1为本发明实施例的方法流程图；
图2为本发明实施例的系统结构框图；
图3为本发明实施例的具体实施流程图。
具体实施方式
下面结合附图和实施例对本发明所述的一种无线手持交互方法及手持交互式多媒体系统作进一步说明。
以下是本发明所述的一种无线手持交互方法及手持交互式多媒体系统的最佳实例，并不因此限定本发明的保护范围。
图1示出了一种无线手持交互方法，用于实现手持终端与多媒体终端的交互，包括以下步骤：
S1、手持终端通过UDP广播协议，自动发出数据包，多媒体终端接收数据包并进行匹配；
S2、多媒体终端通过Remoting在手持终端创建一个远程对象，截取当前手持终端屏幕并转换成二进制数据，并回传给多媒体终端，多媒体终端接收到回传的数据解码转换成图片显示出来；
S3、通过remoting在多媒体终端上创建一个远程对象，用来响应手持终端的按键事件与鼠标事件，手持终端模拟笔记本触摸板对多媒体终端进行远程控制。
作为优选的，在步骤S1中，所述多媒体终端通过数据包匹配实现手持终端注册，并将匹配通过的数据包放入连接列表，当连接列表为空时，自动连接第一台设备。
作为优选的，所述多媒体终端通过关闭再重新注册通道切换连接对象。
作为优选的，所述步骤S2还包括，暂停数据接收，并通过GUI技术进行批注。
作为优选的，所述步骤S3具体包括：
调用本地软件；
通过Afroge框架里的库与资源，调用、控制、设置摄像头；
操作手持终端拍下的照片，实现上下页、翻转、缩放。
图2示出了一种手持交互式多媒体系统，包括多媒体一体机单元和手持交互单元；所述多媒体一体机单元具备可正常教学使用的软件平台系统，同时具备对外无线连接通信接口；所述手持交互单元基本性能能够满足当前的交互软件的运行，并能到达流畅，稳定等性能要求，所述手持交互单元连接多媒体一体机单元，所述手持交互单元采用上述的方法对多媒体一体机单元进行远程控制和同屏显示。作为优选的，还包括一WiFi模块，用于连接多媒体一体机单元和手持交互单元。
作为优选的，还包括主机端交互单元，所述主机交互单元分别设于多媒体一体机单元和手持交互单元内，用于实现手持交互单元对多媒体一体机单元的远程控制及同屏显示。
如图3所示，具体的，在本实施例中，可采用PC端和手持终端设备进行交互操作，手持终端设备可为PAD，分别打开PC端、手持终端设备以及WI-FI路由设备；
2、打开PC端及手持终端设备操作软件；
本软件的技术方案：
1)PAD端通过UDP广播协议，自动发出数据包，PC端通过端口监控，接收数据包并进行匹配，匹配通过的将放入连接列表，当列表为空的时候，自动连接第一台设备；
2)PC端与PAD连接后，通过remoting技术在PAD端创建一个远程对象，截取当前电脑屏幕并转换成二进制数据，回传给PC端，PC端接受到回传的数据解码转换成图片显示出来，这样，PC端就实时获取显示PAD端的界面；
3)PC端可以通过关闭再重新注册通道切换连接对象，可以暂停数据的接收配合GUI技术，可以做简单的批注功能；
4)通过程序代码可以很容易调用本地软件；
5)通过Afroge框架里的库与资源，可以很好的调用、控制、设置摄像头，PAD端可以调用PAD自带的摄像头，实现拍照功能，可以通过Afroge设置摄像头的分辨率、选择摄像头、拍照并保存；
6)开发图片查看器，用来操作PAD拍下的照片，实现上下页、翻转、缩放等功能；
7)通过remoting技术在多媒体主机上创建一个远程对象，用来响应PAD端的按键事件与鼠标事件，PAD客户端模拟笔记本触摸板可以对PC端进行远程控制。
与现有技术相比，本发明的有益效果在于：
1、实现自动链接交互的高效率：本发明采用专用的软件代码设计，链接耗时少、通信稳定，解决了现有手动操作、对设备环境依赖性差、使用步骤繁琐等问题；
2、使用方便：老师可以自由在教室内走动，轻松解决了老师和学生沟通少的问题；
3、扩展性强：本发明技术可适用于平台和工具模块进行对接，可以通过手持交互模式输出对应的方式，实现更多平台资源的使用。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (7)

1.一种无线手持交互方法，用于实现手持终端与多媒体终端的交互，其特征在于， 包括以下步骤：
S1、手持终端通过UDP广播协议，自动发出数据包，多媒体终端接收数据包并进行匹配；
S2、多媒体终端通过Remoting在手持终端创建一个远程对象，截取当前手持终端屏幕并转换成二进制数据，并回传给多媒体终端，多媒体终端接收到回传的数据解码转换成图片显示出来；
S3、通过remoting在多媒体终端上创建一个远程对象，用来响应手持终端的按键事件与鼠标事件，手持终端模拟笔记本触摸板对多媒体终端进行远程控制；
其中，在步骤S1中，所述多媒体终端通过数据包匹配实现手持终端注册，并将匹配通过的数据包放入连接列表，当连接列表为空时，自动连接第一台设备。
2.根据权利要求1所述的无线手持交互方法，其特征在于，所述多媒体终端通过关闭再重新注册通道切换连接对象。
3.根据权利要求1所述的无线手持交互方法，其特征在于，所述步骤S2还包括，暂停数据接收，并通过GUI技术进行批注。
4.根据权利要求1所述的无线手持交互方法，其特征在于，所述步骤S3具体包括：
调用本地软件；
通过Afroge框架里的库与资源，调用、控制、设置摄像头；
操作手持终端拍下的照片，实现上下页、翻转、缩放。
5.一种手持交互式多媒体系统，包括多媒体一体机单元和手持交互单元；所述手持交互单元连接多媒体一体机单元，其特征在于，所述手持交互单元采用权利要求1至4任一所述的方法对多媒体一体机单元进行远程控制和同屏显示。
6.根据权利要求5所述的手持交互式多媒体系统，其特征在于，还包括一WiFi模块，用于连接多媒体一体机单元和手持交互单元。
7.根据权利要求5所述的手持交互式多媒体系统，其特征在于，还包括主机端交互单元，所述主机端交互单元分别设于多媒体一体机单元和手持交互单元内，用于实现手持交互单元对多媒体一体机单元的远程控制及同屏显示。
CN201610781930.4A 2016-08-31 2016-08-31 一种无线手持交互方法及手持交互式多媒体系统 Active CN106339193B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610781930.4A CN106339193B (zh) 2016-08-31 2016-08-31 一种无线手持交互方法及手持交互式多媒体系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610781930.4A CN106339193B (zh) 2016-08-31 2016-08-31 一种无线手持交互方法及手持交互式多媒体系统

Publications (2)

Publication Number Publication Date
CN106339193A CN106339193A (zh) 2017-01-18
CN106339193B true CN106339193B (zh) 2020-06-09

Family

ID=57823569

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610781930.4A Active CN106339193B (zh) 2016-08-31 2016-08-31 一种无线手持交互方法及手持交互式多媒体系统

Country Status (1)

Country Link
CN (1) CN106339193B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109358760A (zh) * 2018-09-07 2019-02-19 视联动力信息技术股份有限公司 一种鼠标控制方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102520850A (zh) * 2011-11-29 2012-06-27 青岛海信移动通信技术股份有限公司 一种无线传屏中输入操作的处理方法及设备
CN103150132A (zh) * 2013-02-21 2013-06-12 海信集团有限公司 一种传屏方法及电子设备
CN103414894A (zh) * 2013-07-29 2013-11-27 上海凯统信息科技有限公司 一种无线实时传屏设备及方法
CN105405325A (zh) * 2015-12-22 2016-03-16 深圳市时尚德源文化传播有限公司 一种网络教学方法及系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8433812B2 (en) * 2008-04-01 2013-04-30 Microsoft Corporation Systems and methods for managing multimedia operations in remote sessions
US9465457B2 (en) * 2010-08-30 2016-10-11 Vmware, Inc. Multi-touch interface gestures for keyboard and/or mouse inputs
US9547466B2 (en) * 2013-05-29 2017-01-17 Vmware, Inc. Systems and methods for using screen sampling to detect display changes

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102520850A (zh) * 2011-11-29 2012-06-27 青岛海信移动通信技术股份有限公司 一种无线传屏中输入操作的处理方法及设备
CN103150132A (zh) * 2013-02-21 2013-06-12 海信集团有限公司 一种传屏方法及电子设备
CN105630452A (zh) * 2013-02-21 2016-06-01 海信集团有限公司 一种传屏方法及电子设备
CN103414894A (zh) * 2013-07-29 2013-11-27 上海凯统信息科技有限公司 一种无线实时传屏设备及方法
CN105405325A (zh) * 2015-12-22 2016-03-16 深圳市时尚德源文化传播有限公司 一种网络教学方法及系统

Also Published As

Publication number Publication date
CN106339193A (zh) 2017-01-18

Similar Documents

Publication Publication Date Title
CN110874959B (zh) 一种多终端同屏教学系统及教学方法
CN103440116B (zh) 一种交互式电子演示系统
CN102646346B (zh) 用于远程授课的移动视频播放方法
CN113504852A (zh) 一种录播一体的智能全面屏黑板系统的控制方法
CN112866734A (zh) 一种自动展示手写输入功能的控制方法及显示设备
KR102031739B1 (ko) 디스플레이 화면과 별도로 수업 진행모드에 따른 강의화면을 구성하여 실시간 인터넷 방송을 지원하는 인터랙티브 화이트보드
WO2018024231A1 (zh) 拼接墙与移动智能终端互联方法和装置
CN104809930A (zh) 一种基于移动平台的多媒体教学辅助方法及其系统
CN203164829U (zh) 无线高清传屏智能一体机
JP6455138B2 (ja) 会議システム、及び制御方法
CN103996314A (zh) 一种基于增强现实的教学系统
CN103516994A (zh) 多屏适配器摄像头配置方法、多屏适配器及多屏互动系统
US9288437B2 (en) Communication device, communication method, and computer-readable storage medium
CN205230394U (zh) 一种多媒体教学系统的集成中央控制器
US20210407462A1 (en) Multi-screen interactive network teaching method and apparatus
CN106598213A (zh) 一种虚拟现实设备及其控制方法、系统
CN106339193B (zh) 一种无线手持交互方法及手持交互式多媒体系统
CN115145507A (zh) 基于多设备的在线互动方法、芯片、电子设备及存储介质
CN112788378A (zh) 显示设备与内容显示方法
US10397531B2 (en) Projector, display device, and display method
CN204145638U (zh) 一种无线智能互动投影显示装置
TW202016904A (zh) 實物教學投影系統及方法
CN110139030A (zh) 混合现实处理系统、方法、服务器及其存储介质
CN111309657B (zh) 电子设备及其控制方法、智能教室系统
CN112463091A (zh) 远程教学屏幕自动切换方法、远程教学系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant