CN106371755A - 多屏互动方法与系统 - Google Patents

多屏互动方法与系统 Download PDF

Info

Publication number
CN106371755A
CN106371755A CN201610799443.0A CN201610799443A CN106371755A CN 106371755 A CN106371755 A CN 106371755A CN 201610799443 A CN201610799443 A CN 201610799443A CN 106371755 A CN106371755 A CN 106371755A
Authority
CN
China
Prior art keywords
handwriting trace
terminal
virtual frame
touched
display interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610799443.0A
Other languages
English (en)
Other versions
CN106371755B (zh
Inventor
刘国华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN GUOHUA IDENTIFICATION TECHNOLOGY DEVELOPMENT Co Ltd
Original Assignee
SHENZHEN GUOHUA IDENTIFICATION TECHNOLOGY DEVELOPMENT Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN GUOHUA IDENTIFICATION TECHNOLOGY DEVELOPMENT Co Ltd filed Critical SHENZHEN GUOHUA IDENTIFICATION TECHNOLOGY DEVELOPMENT Co Ltd
Priority to CN201610799443.0A priority Critical patent/CN106371755B/zh
Publication of CN106371755A publication Critical patent/CN106371755A/zh
Application granted granted Critical
Publication of CN106371755B publication Critical patent/CN106371755B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种多屏互动方法与系统,应用于第一终端,第一终端的显示界面内沿显示界面边沿设置的虚拟边框,第二终端内设置有用于多屏互动的显示区域,当进行多屏互动时,第一终端确定预设的虚拟边框,响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,第二终端在用于多屏互动的显示区域内显示书写轨迹信息,当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,第二终端显示书写轨迹延长线信息,这样即使在显示界面较小的设备上进行多屏互动操作时,也能基于历史书写轨迹并通过虚拟边框将所需互动信息完整表达,给用户在多屏互动操作带来巨大便捷。

Description

多屏互动方法与系统
技术领域
本发明涉及多屏互动技术领域,特别是涉及多屏互动方法与系统。
背景技术
多屏互动是指不同的终端设备,如常见的智能终端、智能手机、电视机等终端之间进行多媒体内容的传输、展示等一系列操作。多屏互动可以实现不同终端上同时共享展示内容,丰富用户的多媒体生活。
以电视机与智能手机应用场景为例,一般的多屏互动技术是电视机和手机的播放都放在服务器上,手机要操控电视机时,把电视机的整个界面复制到手机上,手机上显示的是电视机的菜单,操作此时的菜单就是操作电视机。另外,也可以把手机的播放内容同步到电视机屏幕上,在电视机上看到的内容就是手机播出的内容。
采用上述多屏互动方式虽然可以简单实现多个屏幕之间的互动操作,但是由于上述多屏互动方式类似“镜像”,即在电视机屏和手机屏上显示的内容基本一致。而在实际操作中,多屏互动过程中可能某个互动设备的显示界面较小,用户无法通过该设备完整将所需多屏互动信息完整表达出来,这样给用户操作带来极大不便。
发明内容
基于此,有必要针对现有多屏互动方式会给用户操作带来不便的问题,提供一种不会给用户操作带来不便的多屏互动方法与系统。
一种多屏互动方法,应用于第一终端,包括步骤:
确定第一终端的显示界面内沿显示界面边沿设置的虚拟边框;
响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,由第二终端在用于多屏互动的显示区域内显示书写轨迹信息;
当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,推送书写轨迹延长线信息至第二终端,由第二终端显示书写轨迹延长线信息。
一种多屏互动系统,应用于第一终端,包括:
虚拟边框确定模块,用于确定第一终端的显示界面内沿显示界面边沿设置的虚拟边框;
书写轨迹生成模块,用于响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,由第二终端在用于多屏互动的显示区域内显示书写轨迹信息;
书写轨迹延长线生成模块,用于当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,推送书写轨迹延长线信息至第二终端,由第二终端显示书写轨迹延长线信息。
本发明多屏互动方法与系统,应用于第一终端,第一终端的显示界面内沿显示界面边沿设置的虚拟边框,第二终端内设置有用于多屏互动的显示区域,第一终端确定预设的虚拟边框,响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,第二终端在用于多屏互动的显示区域内显示书写轨迹信息,当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,第二终端显示书写轨迹延长线信息,这样即使在显示界面较小的设备上进行多屏互动操作时,也能基于历史书写轨迹并通过虚拟边框将所需互动信息完整表达,给用户在多屏互动操作带来巨大便捷。
附图说明
图1为本发明多屏互动方法第一个实施例的流程示意图;
图2为本发明多屏互动方法第二个实施例的流程示意图;
图3(a)与图3(b)为描述一个实施例中本发明多屏互动方法的界面示意图;
图4(a)与图4(b)为描述另一个实施例中本发明多屏互动方法的界面示意图;
图5为本发明多屏互动系统第一个实施例的结构示意图;
图6为本发明多屏互动系统第二个实施例的结构示意图。
具体实施方式
如图1所示,一种多屏互动方法,应用于第一终端,包括步骤:
S200:确定在第一终端的显示界面内沿显示界面边沿设置的虚拟边框。
虚拟边框是预先设定于第一终端的显示界面内,其具体是沿显示界面边沿设置,与显示界面边沿的间距可以根据实际情况进行设定或调整。
具体来说,如图2所示,在其中一个实施例中,步骤S200之前还包括:
S120:遍历第一终端的显示界面,获取第一终端的显示界面参数,显示界面参数包括显示界面形状以及显示界面面积。
第一终端进行自我显示界面参数获取,显示界面参数包括显示界面形状以及显示界面面积。显示界面形状目前主流是矩形的,另外在某些特殊显示设备上也会存在三角形、圆形以及多边形等情况,显示界面面积影响第一终端中可以提供给用户操作的面积。
S140:根据显示界面面积确定待划设虚拟边框宽度。
当显示界面面积较大时,第一终端中可以供给用户操作的面积较大,此时虚拟边框宽度可以设置较大;当显示界面面积较小时,第一终端中可以供给用户操作的面积有限,此时虚拟边框宽度应设置较小。具体来说,在实际操作中可以基于历史经验数据合理根据显示界面面积设定设虚拟边框宽度,例如显示界面尺寸(显示界面面积)为16英寸时,设定虚拟边框宽度为2厘米,显示界面尺寸为9英寸时,设定虚拟边框宽度为1厘米。另外还可以按照虚拟边框面积/显示界面面积为某一个固定值来换算虚拟边框宽度,例如这个比值可以为10%、15%或为20%。
S160:根据显示界面形状以及宽度,划设虚拟边框。
在确定显示界面形状以及待划设虚拟边框宽度之后,划设虚拟边框。虚拟边框的每一条边可以设置成与其相邻的显示界面边沿平行,且虚拟边框在各个位置的宽度相同,即虚拟边框外侧沿线与显示界面边沿紧密贴合,虚拟边框内侧沿线与显示界面边沿平行,例如当显示界面为矩形时,虚拟边框内侧沿线构成一个等比例缩小的矩形,当显示界面为五角形时,虚拟边框内侧沿线构成一个等比例缩小的五角形。
具体来说,在实际应用中,上述划设虚拟边框的过程,可以在编程之初就考虑,即编程人员基于实际应用场景的需要(例如以适宜手指操控为准则来设定)以及第一终端的显示界面参数,确定好待划设虚拟边框宽度,将这个待划设虚拟边框宽度的数值以代码形式写入软件中,之后再将该软件记载到第一终端中,第一终端运行该软件即可采用上述方式自动划设合理的虚拟边框。
S400:响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,由第二终端在用于多屏互动的显示区域内显示书写轨迹信息。
用户在第一终端上进行书写操作,生成书写轨迹信息,第一终端将实时生成的书写轨迹信息发送到第二终端,在第二终端将这些书写轨迹信息在用于多屏互动的显示区域内显示。第二终端内划设有与第一终端进行多屏互动的显示区域,具体来说,第二终端的显示界面可以被划设为多个不同的显示区域,不同的显示区域分别与不同的终端进行多屏互动,即与多个不同的终端进行局部同步,显示区域的选择与划分可以根据第一终端设备类型等数据来划设。在实际应用中,第一终端先发送多屏互动请求,在该多屏互动请求中携带有第一终端的类型或属性等参数,第二终端响应多屏互动请求,根据多屏互动请求从预设数据库中获取多屏互动数据,多屏互动数据包括多屏互动的同步区域配置参数,第二终端根据同步区域配置参数设置多屏互动的同步区域,建立与第一终端的同步通信,实时接收第一终端的同步数据,并将同步数据在多屏互动的同步区域显示。如图3(a)所示,用户在第一终端上写“一”,第二终端中用于多屏互动的显示区域内显示“一”。
S600:当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,推送书写轨迹延长线信息至第二终端,由第二终端显示书写轨迹延长线信息。
上一时间点是指紧邻的时间点,其并不具体指代时间为多少,其用于表示在虚拟边框被触碰之前是存在书写轨迹的,具体来说,上一时间点可以理解为1微秒、百分之一微秒等非常小的时间。虚拟边框被触碰且上一时间点存在书写轨迹,即表明当前书写轨迹是连续一直到虚拟边框。如图3(b)所示,在第一终端上写“一”并且用户手指一直移动到虚拟边框,此时由于第一终端操作界面有限用户无法继续再移动,用户手指停留在虚拟边框,由于“一”的书写轨迹是一直延续过来到触摸边框,即虚拟边框被触碰且上一时间点存在书写轨迹,第一终端根据上一时间点书写轨迹,生成延长线信息,推送书写轨迹延长线信息至第二终端,在第二终端显示界面中即将会显示书写轨迹延长线信息,即会显示一个更加长的“一”。需要指出的是,延长线信息是基于上一时间点书写轨迹来生成的,即其会顺着上一时间点书写轨迹的相同的参数来生成,这里的参数包括书写轨迹的宽度、书写轨迹的弧度等。在实际应用中,当书写轨迹为一个圆弧时,在第一终端中可能由于屏幕面积较小仅能形成出一小段圆弧书写轨迹,当用户画圆弧触碰到虚拟边框时,第一终端根据上一时间点形成“圆弧”的宽度以及弧度形成圆弧的延长线信息,推送圆弧的延长线信息到第二终端,一定时间之后,在第二终端中可显示一个完整“圆”书写轨迹。
本发明多屏互动方法,应用于第一终端,第一终端的显示界面内沿显示界面边沿设置的虚拟边框,第二终端内设置有用于多屏互动的显示区域,当进行多屏互动时,第一终端确定预设的虚拟边框,响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,第二终端在用于多屏互动的显示区域内显示书写轨迹信息,当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,第二终端显示书写轨迹延长线信息,这样即使在显示界面较小的设备上进行多屏互动操作时,也能基于历史书写轨迹并通过虚拟边框将所需互动信息完整表达,给用户在多屏互动操作带来巨大便捷。
如图2所示,步骤S400之后还包括:
S520:当虚拟边框被触碰且上一时间点不存在书写轨迹时,识别虚拟边框被触碰的位置,根据虚拟边框被触碰的位置生成显示区域更新请求。
S540:推送显示区域更新请求至第二终端,由第二终端根据显示区域更新请求更新用于多屏互动的显示区域。
虚拟边框被触碰且上一时间点不存在书写轨迹表明用户是直接触碰虚拟边框的,此时识别虚拟边框被触碰位置,并基于虚拟边框被触碰的位置生成显示区域更新请求,推送显示区域更新请求至第二终端,第二终端更新用于多屏互动的显示区域。
更具体来说,步骤S520包括:
步骤一:当虚拟边框被触碰且上一时间点不存在书写轨迹时,识别虚拟边框被触碰的边。
步骤二:确定虚拟边框被触碰的边在第一终端正视显示状态下所处方位。
如图4(a)所示,以虚拟边框为矩形为例,此时被触碰的边为第一终端正视状态下右边这条边,即此时虚拟边框被触碰的边所处方位为“右边”。
步骤三:生成向所处方位移动的显示区域更新请求。
生成向“右边”移动的显示区域更新请求,发送该更新请求到第二终端,如图4(b)所示,第二终端向右边移动用于多屏互动的显示区域(图中有灰度区域)。
具体来说,在实际应用中可以如图4(a)和图4(b)的操作界面示意图所示,在第二终端(电视机)中划设多个与第一终端(手机或平板)的同步显示区域,第一终端与第二终端同步的内容在指定的同步区域内进行同步显示,当用户点击第一终端中的虚拟边框时,第一终端感应用户点击的虚拟边框中边的方位,图4中为右边这条边,第一终端即发送向右边移动的显示区域更新请求到第二终端,第二终端接收到该请求之后,将与第一终端的同步显示区域向右移动一个区域,实现更新,当用户保持点击第一终端中虚拟边框的右边位置时,第二终端将会一直向右移动与第一终端的同步显示区域,直至不再接收到来自第一终端的显示区域更新请求(即用户没有再点击第一终端中虚拟边框的右边)。
在其中一个实施例中,当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息的步骤包括:
步骤一:当虚拟边框被触碰且上一时间点存在书写轨迹时,分析历史已存在的连续书写轨迹长度以及书写时间。
继续以书写轨迹为“一”为例,分析已经存在的“一”轨迹长度以及书写该连续书写轨迹的时间。假定长度为3厘米,时间为3秒。
步骤二:计算单位时间内书写轨迹长度。
单位时间内书写轨迹长度=历史已存在的连续书写轨迹长度/书写时间,单位时间内书写轨迹长度为1厘米,即书写速度为1厘米/秒。
步骤三:计时虚拟边框被触碰时长,并根据虚拟边框被触碰时长以及单位时间内书写轨迹长度,计算书写轨迹延长线长度。
根据步骤二计算得到的单位时间内书写轨迹长度,以及虚拟边框被触碰时长,能够计算出书写轨迹延长线长度。例如当前即使用户触碰虚拟边框时长为5秒,即书写轨迹延长线长度为5厘米。
步骤四:根据上一时间点书写轨迹以及书写轨迹延长线长度,生成书写轨迹延长线信息。
再考虑上一时间点书写轨迹,此时会生成一个5厘米长度的“一”的书写轨迹,即最终在第二终端上将显示一个8厘米长度“一”的书写轨迹。
上述针对“当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息”的进一步处理过程,可以在编写软件之初就考虑。即编程人员可以事先根据实际应用场景的需要,采用上述方式确定好书写速度,将这个书写速度以代码的形式编写到软件中,再将该编写的软件记载到第一终端中,这样就可以根据不同应用场景的需要,采用不同的速度生成书写轨迹延长线。
在其中一个实施例中,所述当所述虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息的步骤包括:
步骤一:当所述虚拟边框被触碰且上一时间点存在书写轨迹时,感应所述虚拟边框被触碰面积以及被触碰时长。
步骤二:根据上一时间点书写轨迹,确定书写轨迹延长线方向。
步骤三:根据所述虚拟边框被触碰面积以及被触碰时长,调节书写轨迹延长线生成速度,生成书写轨迹延长线信息。
具体来说,在实际操作过程中,可能用户需要快速生成比较大的延长线信息,例如继续以上面写“一”为实例,当用户需要在第二终端上生成一个很长的“一”书写轨迹时,用户会希望在点击到第一终端上虚拟边框时,很长的“一”的书写轨迹能够更快展示在第二终端上,对此,第一终端可以基于感应到的虚拟边框被触碰面积以及被触碰时长,来调整书写轨迹延长线生成速度,更具体来说,当虚拟边框被触碰面积和或被触碰时长越长时,书写轨迹延长线生成速度速度越快,具体调节幅度可以基于历史经验数据或者应用场景需要进行设定。在实际应用中,编程人员可以基于应用的需要将基于虚拟边框被触碰面积以及被触碰时长,调节书写轨迹延长线生成速度的系数采用编程的方式预先写入至软件中,第一终端在运行此软件之后即可实现变速生成书写轨迹延长线,给用户带来便捷操作和良好的用户体验。
需要指出的是,在上述操作过程中,还可以在第一终端上执行放大操作,以便将第一终端上对应第二终端显示区域的内容进行放大以利更加精细进行书写(绘画);还可以执行缩小操作,以便第一终端上对应第二终端显示区域位置附近的内容进行缩小,以利于观看更大区域内容的显示效果;第一终端还可以执行清除和保存等操作,以便于对在第二终端上书写(绘画)内容进行修改和保存,也可以设定时间间隔自动保存一次。
如图5所示,一种多屏互动系统,应用于第一终端,包括:
虚拟边框确定模块200,用于确定在第一终端的显示界面内沿显示界面边沿设置的虚拟边框。
书写轨迹生成模块400,用于响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,由第二终端在用于多屏互动的显示区域内显示书写轨迹信息。
书写轨迹延长线生成模块600,用于当虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,推送书写轨迹延长线信息至第二终端,由第二终端显示书写轨迹延长线信息。
本发明多屏互动系统,应用于第一终端,第一终端的显示界面内沿显示界面边沿设置的虚拟边框,第二终端内设置有用于多屏互动的显示区域,虚拟边框确定模块200确定预设的虚拟边框,书写轨迹生成模块400响应用户操作,生成书写轨迹信息,推送书写轨迹信息至第二终端,第二终端在用于多屏互动的显示区域内显示书写轨迹信息,当虚拟边框被触碰且上一时间点存在书写轨迹时,书写轨迹延长线生成模块600根据上一时间点书写轨迹,生成书写轨迹延长线信息,第二终端显示书写轨迹延长线信息,这样即使在显示界面较小的设备上进行多屏互动操作时,也能基于历史书写轨迹并通过虚拟边框将所需互动信息完整表达,给用户在多屏互动操作带来巨大便捷。
如图6所示,在其中一个实施例中,多屏互动系统还包括:
显示区域更新模块520,用于当虚拟边框被触碰且上一时间点不存在书写轨迹时,识别虚拟边框被触碰的位置,根据虚拟边框被触碰的位置生成显示区域更新请求。
推送模块540,用于推送显示区域更新请求至第二终端,由第二终端根据显示区域更新请求更新用于多屏互动的显示区域。
在其中一个实施例中,显示区域更新模块包括:
触碰识别单元,用于当虚拟边框被触碰且上一时间点不存在书写轨迹时,识别虚拟边框被触碰的边。
方位确定单元,用于确定虚拟边框被触碰的边在第一终端正视显示状态下所处方位。
更新指令生成单元,用于生成向所处方位移动的显示区域更新请求。
如图6所示,在其中一个实施例中,多屏互动系统还包括:
显示界面参数获取模块120,用于遍历第一终端的显示界面,获取第一终端的显示界面参数,显示界面参数包括显示界面形状以及显示界面面积。
间距确定模块140,用于根据显示界面面积确定待划设虚拟边框宽度。
划设模块160,用于根据显示界面形状以及宽度,划设虚拟边框。
在其中一个实施例中,书写轨迹延长线生成模块600包括:
历史分析单元,用于当虚拟边框被触碰且上一时间点存在书写轨迹时,分析历史已存在的连续书写轨迹长度以及书写时间。
单位长度计算单元,用于计算单位时间内书写轨迹长度。
延长线长度计算单元,用于计时虚拟边框被触碰时长,并根据虚拟边框被触碰时长以及单位时间内书写轨迹长度,计算书写轨迹延长线长度。
书写轨迹延长线生成单元,用于根据上一时间点书写轨迹以及书写轨迹延长线长度,生成书写轨迹延长线信息。
以上实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种多屏互动方法,应用于第一终端,其特征在于,包括步骤:
确定在所述第一终端的显示界面内沿显示界面边沿设置的虚拟边框;
响应用户操作,生成书写轨迹信息,推送所述书写轨迹信息至第二终端,由所述第二终端在用于多屏互动的显示区域内显示所述书写轨迹信息;
当所述虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,推送所述书写轨迹延长线信息至所述第二终端,由所述第二终端显示所述书写轨迹延长线信息。
2.根据权利要求1所述的多屏互动方法,其特征在于,所述响应用户操作,生成书写轨迹信息,推送所述书写轨迹信息至所述第二终端的步骤之后还包括:
当所述虚拟边框被触碰且上一时间点不存在书写轨迹时,识别虚拟边框被触碰的位置,根据所述虚拟边框被触碰的位置生成显示区域更新请求;
推送所述显示区域更新请求至所述第二终端,由所述第二终端根据所述显示区域更新请求更新所述用于多屏互动的显示区域。
3.根据权利要求2所述的多屏互动方法,其特征在于,所述当所述虚拟边框被触碰且上一时间点不存在书写轨迹时,识别虚拟边框被触碰的位置,根据所述虚拟边框被触碰的位置生成显示区域更新请求的步骤包括:
当所述虚拟边框被触碰且上一时间点不存在书写轨迹时,识别所述虚拟边框被触碰的边;
确定所述虚拟边框被触碰的边在所述第一终端正视显示状态下所处方位;
生成向所述所处方位移动的显示区域更新请求。
4.根据权利要求1所述的多屏互动方法,其特征在于,所述确定在所述第一终端的显示界面内沿显示界面边沿设置的虚拟边框的步骤之前还包括:
遍历所述第一终端的显示界面,获取所述第一终端的显示界面参数,所述显示界面参数包括显示界面形状以及显示界面面积;
根据所述显示界面面积确定待划设虚拟边框宽度;
根据所述显示界面形状以及所述宽度,划设虚拟边框。
5.根据权利要求1所述的多屏互动方法,其特征在于,所述当所述虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息的步骤包括:
当所述虚拟边框被触碰且上一时间点存在书写轨迹时,分析历史已存在的连续书写轨迹长度以及书写时间;
计算单位时间内书写轨迹长度;
计时所述虚拟边框被触碰时长,并根据所述虚拟边框被触碰时长以及所述单位时间内书写轨迹长度,计算书写轨迹延长线长度;
根据上一时间点书写轨迹以及所述书写轨迹延长线长度,生成书写轨迹延长线信息。
6.根据权利要求1所述的多屏互动方法,其特征在于,所述当所述虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息的步骤包括:
当所述虚拟边框被触碰且上一时间点存在书写轨迹时,感应所述虚拟边框被触碰面积以及被触碰时长;
根据上一时间点书写轨迹,确定书写轨迹延长线方向;
根据所述虚拟边框被触碰面积以及被触碰时长,调节书写轨迹延长线生成速度,生成书写轨迹延长线信息。
7.一种多屏互动系统,应用于第一终端,其特征在于,包括:
虚拟边框确定模块,用于确定在所述第一终端的显示界面内沿显示界面边沿设置的虚拟边框;
书写轨迹生成模块,用于响应用户操作,生成书写轨迹信息,推送所述书写轨迹信息至第二终端,由所述第二终端在用于多屏互动的显示区域内显示所述书写轨迹信息;
书写轨迹延长线生成模块,用于当所述虚拟边框被触碰且上一时间点存在书写轨迹时,根据上一时间点书写轨迹,生成书写轨迹延长线信息,推送所述书写轨迹延长线信息至所述第二终端,由所述第二终端显示所述书写轨迹延长线信息。
8.根据权利要求7所述的多屏互动系统,其特征在于,还包括:
显示区域更新模块,用于当所述虚拟边框被触碰且上一时间点不存在书写轨迹时,识别虚拟边框被触碰的位置,根据所述虚拟边框被触碰的位置生成显示区域更新请求;
推送模块,用于推送所述显示区域更新请求至所述第二终端,由所述第二终端根据所述显示区域更新请求更新所述用于多屏互动的显示区域。
9.根据权利要求7所述的多屏互动系统,其特征在于,还包括:
显示界面参数获取模块,用于遍历所述第一终端的显示界面,获取所述第一终端的显示界面参数,所述显示界面参数包括显示界面形状以及显示界面面积;
间距确定模块,用于根据所述显示界面面积确定待划设虚拟边框宽度;
划设模块,用于根据所述显示界面形状以及所述宽度,划设虚拟边框。
10.根据权利要求7所述的多屏互动系统,其特征在于,所述书写轨迹延长线生成模块包括:
历史分析单元,用于当所述虚拟边框被触碰且上一时间点存在书写轨迹时,分析历史已存在的连续书写轨迹长度以及书写时间;
单位长度计算单元,用于计算单位时间内书写轨迹长度;
延长线长度计算单元,用于计时所述虚拟边框被触碰时长,并根据所述虚拟边框被触碰时长以及所述单位时间内书写轨迹长度,计算书写轨迹延长线长度;
书写轨迹延长线生成单元,用于根据上一时间点书写轨迹以及所述书写轨迹延长线长度,生成书写轨迹延长线信息。
CN201610799443.0A 2016-08-31 2016-08-31 多屏互动方法与系统 Active CN106371755B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610799443.0A CN106371755B (zh) 2016-08-31 2016-08-31 多屏互动方法与系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610799443.0A CN106371755B (zh) 2016-08-31 2016-08-31 多屏互动方法与系统

Publications (2)

Publication Number Publication Date
CN106371755A true CN106371755A (zh) 2017-02-01
CN106371755B CN106371755B (zh) 2020-03-27

Family

ID=57899381

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610799443.0A Active CN106371755B (zh) 2016-08-31 2016-08-31 多屏互动方法与系统

Country Status (1)

Country Link
CN (1) CN106371755B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107193480A (zh) * 2017-06-01 2017-09-22 浙江金华海创科技有限公司 一种触控双屏交互系统及其控制方法
CN108089763A (zh) * 2018-01-08 2018-05-29 广州视源电子科技股份有限公司 书写轨迹的显示方法、装置、设备及存储介质
CN112860109A (zh) * 2021-02-09 2021-05-28 北京汉王鹏泰科技股份有限公司 一种触控输入装置、方法、电子设备及可读存储介质
WO2022134058A1 (zh) * 2020-12-25 2022-06-30 京东方科技集团股份有限公司 书写方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103383262A (zh) * 2013-07-11 2013-11-06 北京奇虎科技有限公司 电子地图路线指引的方法和系统
CN103425403A (zh) * 2012-05-14 2013-12-04 华为技术有限公司 一种屏幕间显示内容的穿越方法、装置及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103425403A (zh) * 2012-05-14 2013-12-04 华为技术有限公司 一种屏幕间显示内容的穿越方法、装置及系统
CN103383262A (zh) * 2013-07-11 2013-11-06 北京奇虎科技有限公司 电子地图路线指引的方法和系统

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107193480A (zh) * 2017-06-01 2017-09-22 浙江金华海创科技有限公司 一种触控双屏交互系统及其控制方法
CN107193480B (zh) * 2017-06-01 2019-11-19 孙康 一种触控双屏交互系统及其控制方法
CN108089763A (zh) * 2018-01-08 2018-05-29 广州视源电子科技股份有限公司 书写轨迹的显示方法、装置、设备及存储介质
CN108089763B (zh) * 2018-01-08 2021-03-23 广州视源电子科技股份有限公司 书写轨迹的显示方法、装置、设备及存储介质
WO2022134058A1 (zh) * 2020-12-25 2022-06-30 京东方科技集团股份有限公司 书写方法及系统
CN115349114A (zh) * 2020-12-25 2022-11-15 京东方科技集团股份有限公司 书写方法及系统
CN115349114B (zh) * 2020-12-25 2024-04-16 京东方科技集团股份有限公司 书写方法及系统
CN112860109A (zh) * 2021-02-09 2021-05-28 北京汉王鹏泰科技股份有限公司 一种触控输入装置、方法、电子设备及可读存储介质
CN112860109B (zh) * 2021-02-09 2022-02-22 北京汉王鹏泰科技股份有限公司 一种触控输入装置、方法、电子设备及可读存储介质

Also Published As

Publication number Publication date
CN106371755B (zh) 2020-03-27

Similar Documents

Publication Publication Date Title
US20190324632A1 (en) Messaging with drawn graphic input
CN106371755A (zh) 多屏互动方法与系统
CN108334486B (zh) 表格控制方法、装置、设备及存储介质
CN104202643B (zh) 智能电视的触屏遥控终端屏幕映射方法、触屏遥控终端的控制方法及系统
WO2021203724A1 (zh) 笔迹选择方法、装置、计算机设备和存储介质
CN105511792A (zh) 一种表单在位手写输入方法及系统
WO2021082885A1 (zh) 语义分割模型的训练样本的生成方法、装置、存储介质及电子设备
CN110609654B (zh) 数据同步显示方法、装置、设备以及远程会议系统
CN103257811A (zh) 基于触摸屏的图片显示系统和方法
CN111580903B (zh) 实时投票方法、装置、终端设备和存储介质
CN106502667B (zh) 一种渲染方法及装置
CN105511794A (zh) 一种支持多点触控手势操作的标绘系统及其方法
US20150121301A1 (en) Information processing method and electronic device
CN103885598A (zh) 自然交互界面下的书法数字化系统及利用该系统实现书法实时书写的方法
WO2018191092A1 (en) Live ink presence for real-time collaboration
CN103207730A (zh) 一种可定位拖拉式流程图生成方法及流程图生成器
CN103645828A (zh) 一种带滑动动画效果的主界面菜单的显示方法
CN106855772A (zh) 一种信息展示方法及装置
CN108399058A (zh) 一种信号显示控制方法及装置
CN103135912B (zh) 一种生成操作对象的方法和电子设备
CN103809912A (zh) 基于多点触控触摸屏的平板电脑
DE112020002244T5 (de) Vorrichtung, Verfahren und grafische Benutzerschnittstelle zur Erzeugung von CGR-Objekten
KR20180036205A (ko) 시뮬레이션용 스마트 테이블 장치
US20100302150A1 (en) Peer layers overlapping a whiteboard
CN109388457A (zh) 一种多场景的远程快速界面交互方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant