CN102238361A - 一种终端及其显示方法 - Google Patents

一种终端及其显示方法 Download PDF

Info

Publication number
CN102238361A
CN102238361A CN2010101591195A CN201010159119A CN102238361A CN 102238361 A CN102238361 A CN 102238361A CN 2010101591195 A CN2010101591195 A CN 2010101591195A CN 201010159119 A CN201010159119 A CN 201010159119A CN 102238361 A CN102238361 A CN 102238361A
Authority
CN
China
Prior art keywords
image
data
terminal
original image
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010101591195A
Other languages
English (en)
Other versions
CN102238361B (zh
Inventor
陆游龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN2010101591195A priority Critical patent/CN102238361B/zh
Publication of CN102238361A publication Critical patent/CN102238361A/zh
Application granted granted Critical
Publication of CN102238361B publication Critical patent/CN102238361B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)

Abstract

本发明提供一种终端及其显示方法,该终端包括:主板;与所述主板连接的显示屏;与所述主板连接的图像采集装置,用于采集一原始图像;与所述主板连接的第一通信装置,用于利用一通信协议将所述原始图像发送到第二终端,并通过所述通信协议接收所述第二终端返回的第一数据;所述第一数据用于描述对所述第二终端接收到的所述原始图像执行的标记操作;与所述主板连接的图像生成装置,用于根据所述第一数据生成至少包括一标记的第一图像;与所述主板连接的投影装置,用于投影所述第一图像,以显示所述标记操作。本发明提高了远程协助的效率。

Description

一种终端及其显示方法
技术领域
本发明涉及电子设备,特别是一种终端及其显示方法。
背景技术
现实工作生活中,用户经常会遇到需要通过无线/有线终端对别人进行远程协助或者接受别人远程协助的情况,同时还有直观远程沟通互动进行内容演示,问题讨论的需要。比如远程医疗诊断、软件安装以及技能培训等。
现有的远程协助方法中,可以通过特定的协议建立网络连接,远程控制被协助人的终端进行直接协助,然而上述方法依赖于操作系统的相关功能,其在操作系统本身出现问题,或者真实世界中需要进行协助时就无法应用。
而另外一种远程协助方法是通过语音或视频来进行远程协助,然而该方案由于语音或视频方式都存在的不直观的局限性,不管视频还是音频,用于都需要在实际操作面上对照以找到视频或音频中指示的位置,而如果采用视频,视频画面一般在显示屏上显示,所以用户需要在显示屏和真实操作面之间进行视线的转换,因此存在效率低,不直接的问题。
发明内容
本发明的目的是提供一种终端及其显示方法,为用户提供直观的协助画面,提高远程协助的效率。
为了实现上述目的,本发明实施例提供了一种第一终端,包括:
主板;
与所述主板连接的显示屏;
与所述主板连接的图像采集装置,用于采集一原始图像;
与所述主板连接的第一通信装置,用于利用一通信协议将所述原始图像发送到第二终端,并通过所述通信协议接收所述第二终端返回的第一数据;所述第一数据用于描述对所述第二终端接收到的所述原始图像执行的标记操作;
与所述主板连接的图像生成装置,用于根据所述第一数据生成至少包括一标记的第一图像;
与所述主板连接的投影装置,用于投影所述第一图像,以显示所述标记操作。
上述的第一终端,其中,
所述图像采集装置的图像采集区域的至少一部分被所述投影装置的投影区域所覆盖;
所述图像采集装置用于从第一区域采集所述原始图像;
所述第一数据包括用于描述所述标记的形状信息的第二数据和用于描述所述标记的位置信息的第三数据;
所述图像生成装置具体用于根据所述第二数据和第三数据生成所述第一图像。
上述的第一终端,其中,所述第一数据具体为:根据对第二终端的展现所述原始图像的触摸屏执行的指点操作生成的数据。
上述的第一终端,其中,所述第一数据具体为:根据第二图像中记录的所述标记操作生成的数据,所述第二图像为所述第二终端将所述原始图像投影后,拍摄到的记录有对投影后的原始图像执行的所述标记操作的图像。
上述的第一终端,其中,所述图像生成装置具体包括:
第一图像生成模块,用于根据所述第一数据生成一待校准图像;
校准模块,用于根据所述第一终端在采集原始图像时至投影第一图像时的运动信息生成一校准数据,并利用所述校准数据对所述待校准图像进行校准,得到所述第一图像。
上述的第一终端,其中,所述第一数据为第二图像的图像数据,所述第二图像为所述第二终端将所述原始图像投影后,拍摄到的记录有对投影后的原始图像执行的标记操作的图像;
所述图像生成装置具体用于解析所述第二图像的图像数据,得到所述第一图像。
为了实现上述目的,本发明实施例还提供了一种第二终端,包括:
主板;
与所述主板连接的显示屏;
与所述主板连接的第二通信装置,用于利用一通信协议从第一终端接收第一终端采集的原始图像;
与所述主板连接的数据生成装置,用于生成一第一数据,所述第一数据用于描述对所述第二通信装置接收到的所述原始图像执行的标记操作;
与所述主板连接的第三通信装置,用于通过所述通信协议向所述第一终端返回所述第一数据,使所述第一终端能根据所述第一数据生成至少包括一标记的第一图像后,投影所述第一图像,以显示所述标记操作。
上述的第二终端,其中,所述第一数据包括用于描述所述标记的形状信息的第二数据和用于描述所述标记的位置信息的第三数据。
上述的第二终端,其中,还包括:
与所述主板连接的触摸屏;
所述数据生成装置具体用于根据对展现所述原始图像的所述触摸屏执行的指点操作生成所述第一数据。
上述的第二终端,其中,还包括:
与所述主板连接的投影装置,用于投影所述原始图像;
与所述主板连接的拍摄装置,用于拍摄记录有对投影后的原始图像执行的所述标记操作的第二图像;
所述数据生成装置具体用于根据所述第二图像中记录的所述标记操作生成所述第一数据。
上述的第二终端,其中,还包括:
与所述主板连接的投影装置,用于投影所述原始图像;
与所述主板连接的拍摄装置,用于拍摄记录有对投影后的原始图像执行的所述标记操作的第二图像;
所述数据生成装置具体用于将所述第二图像的图像数据作为所述第一数据。
为了实现上述目的,本发明实施例还提供了一种显示方法,包括:
第一终端采集一原始图像;
第一终端利用一通信协议将所述原始图像发送到第二终端;
第一终端通过所述通信协议接收所述第二终端返回的第一数据;所述第一数据用于描述对所述第二终端接收到的所述原始图像执行的标记操作;
第一终端根据所述第一数据生成至少包括一标记的第一图像;
第一终端投影所述第一图像,以显示所述标记操作。
本发明实施例具有以下的有益效果:
本发明实施例中,第一终端采集一原始图像后,将所述原始图像发送到第二终端,并在通过所述通信协议接收所述第二终端返回的第一数据后,根据所述第一数据生成至少包括一标记的第一图像,并投影所述第一图像,以显示所述标记操作,通过以上方式,使得第一终端的用户可以直观的了解对端用户的标记操作,快速确定对方所指示的目标所在的位置,通过为用户提供直观的协助画面,提高了远程协助的效率。
附图说明
图1为本发明实施例的第一终端和第二终端的结构示意图;
图2为本发明实施例的一种情况下下如何得到第一数据的示意图;
图3为本发明实施例的另一种情况下如何得到第一数据的示意图;
图4为本发明实施例的方法的流程示意图;
图5a到图5d为本发明实施例的一种具体实现过程举例的示意图。
具体实施方式
本发明实施例的终端及其显示方法中,由第一终端将原始图像发送到第二终端,第二终端根据用户对该原始图像进行的标记操作,向第一终端返回用于描述对所述第二终端接收到的所述原始图像执行的标记操作的第一数据,并根据该第一数据形成远程协助图像后投影,使用户能够直观的看到对端用户所指示的具体位置,提高远程协助的效率。
如图1所示,本发明实施例的第一终端,包括:
主板A;
与所述主板A连接的显示屏;
与所述主板A连接的图像采集装置,用于采集一原始图像;
与所述主板A连接的第一通信装置,用于利用一通信协议将所述原始图像发送到第二终端,并通过所述通信协议接收所述第二终端返回的第一数据;所述第一数据用于描述对所述第二终端接收到的所述原始图像执行的标记操作;
与所述主板A连接的图像生成装置,用于根据所述第一数据生成至少包括一标记的第一图像;
与所述主板A连接的投影装置,用于投影所述第一图像,以显示所述标记操作。
而本发明实施例的第二终端,如图1所示,包括:
主板B;
与所述主板B连接的显示屏;
与所述主板B连接的第二通信装置,用于利用一通信协议从第一终端(第一通信装置)接收第一终端采集的原始图像;
与所述主板B连接的数据生成装置,用于生成一第一数据,所述第一数据用于描述对所述第二通信装置接收到的所述原始图像执行的标记操作;
与所述主板B连接的第三通信装置,用于通过所述通信协议向所述第一终端返回所述第一数据,使所述第一终端能根据所述第一数据生成至少包括一标记的第一图像后,投影所述第一图像,以显示所述标记操作。
当然,应当了解的是,虽然在图1中,第二通信装置和第三通信装置分别用于数据接收和发送,但第二通信装置和第三通信装置仅仅是功能上的区分,其完全可以由一个模块来实现。
同时,第一终端和第二终端在图中的通信装置直接连接,其仅仅表示二者之间可以进行数据传输,而不表示二者之间一定有直接的物理连接,第一终端和第二终端通过一定的通信协议进行数据传输,该通信协议可以采用任何现有的可以用于数据传输的通信协议,如应用于互联网传输的通信协议、应用于移动通信网络传输的通信协议、应用于无线局域网传输的通信协议,甚至可以是自定义的协议,只要其能实现数据传输即可。
在本发明的具体实施例中,第二终端需要生成用于描述对接收到的原始图像执行的标记操作的第一数据,并由第一终端根据该第一数据还原该标记操作,在此,对第一数据以及标记操作还原的具体实现方式进行详细说明。
<方式一>
在实现方式一中,该第一图像中仅包括一标记。
该第一数据中包括两部分信息:标记的形状以及标记在图像中的位置,因此,在实现方式一中,该第一数据包括用于描述所述标记的形状信息的第二数据和用于描述所述标记的位置信息的第三数据,举例说明如下:
假定该标记为一个圆圈,则该第二数据记录标记形状为圆,而第二部分则可以记录圆的圆心坐标和半径。
假定该标记为一个对勾,则该第二数据记录标记形状为对勾,而第二部分则可以记录对勾的起点、转折点和终点的坐标。
假定该标记为一条线段,则该第二数据记录标记形状为线段,而第二部分则可以记录线段的起点和终点的坐标。
假定该标记为一个四边形,则该第二数据记录标记形状为方框,而第二部分则可以记录4个顶点的坐标。
假定该标记为一三角形,则该第二数据记录标记形状为三角形,而第二部分则可以记录该三角形3个顶点的坐标。
以上仅仅是举例说明,该标记也可以是其它的形状,在此不一一列举。
第一终端可以根据第二数据和第三数据得到仅包括标记的第一图像,说明如下。
假定该标记为一个圆圈,则该第二数据记录标记形状为圆,而第二部分则可以记录圆的圆心坐标和半径。
此时,第一终端首先获取形状信息,发现是圆,则知道第三数据中记录的是圆心坐标和半径,在圆心坐标和半径已知的情况下,则可以唯一确定该圆,并得到包括该圆的第一图像。
对于其它形状的标记,同样可以采用上述方式来确定第一图像,在此不再详细说明。
当然,具体使用何种数据结构来保存该第一数据,第一终端如何解析该第一数据,只要第一终端和第二终端预先定义好即可,其具体实现方式多种多样,在此不详细举例说明。
以上描述了第一图像中仅包括一标记的情况下,第一数据应该包括哪些部分的内容,下面具体描述如何得到以上的第二数据和第三数据。
在第二终端是触摸屏的情况下,所述第一数据可以根据对第二终端的展现所述原始图像的触摸屏执行的指点操作来生成,说明如下。
第二终端包括与所述主板连接的触摸屏;
第二终端利用触摸屏显示收到的原始图像,用户在触摸屏上对原始图像进行标记操作,此时,触摸屏记录了指点物在标记操作过程中的轨迹,由数据生成装置根据该原始轨迹选择与之最接近的图形(如圆、对勾、三角形、方框等),并确定该选择得到的图形的在图像中的位置。
具体如何得到描述所述标记的位置信息的第三数据的一种实现方式说明如下。
假定如图2所示,指点物的原始轨迹为近似的圆形(如实线所示),则可以取左端点和右端点,并将二者的连线作为直径,得到虚线所示的圆,并可以得到圆的圆心坐标和半径。
假定如图3所示,指点物的原始轨迹为近似的三角形(如实线所示),则可以取上端点左端点和右端点,得到虚线所示的三角形,并可以得到三角形的3个顶点。
对于其它形状在此不再一一举例说明。
在第二终端不包括触摸屏,但包括投影装置和图像采集装置的情况下,可以通过如下方式得到该第一数据。
该第二终端还包括:
与所述主板连接的投影装置,用于投影接收到的所述原始图像;
与所述主板连接的拍摄装置,用于拍摄记录有对投影后的原始图像执行的所述标记操作的第二图像;如用户利用激光笔在投影的原始图像上进行操作,又或者用户利用手指在投影的原始图像上进行指画操作。
该第二图像被记录后,利用特征提取技术,即可得到标记操作的轨迹,进而根据该原始轨迹选择与之最接近的图形(如圆、对勾、三角形、方框等),并确定该选择得到的图形的在图像中的位置。
这种方式与之前描述方式的不同之处在于,需要得到激光笔、用户手指在投影图像上的轨迹,而如何利用拍摄到的一系列连续图像得到物体轨迹已经有成熟的算法,在此不作详细描述。
而原始轨迹得到后,具体如何根据该原始轨迹选择与之最接近的图形(如圆、对勾、三角形、方框等),并确定该选择得到的图形在图像中的位置与之前的触摸屏方式的差别仅在于,原始轨迹的来源不同,因此在此不再赘述。
上面提到的各种是实现方式中,第二数据和第三数据属于两组数据,而且不管从形状还是位置上来看,得到的第一数据中记录的标记与原始标记有所不同,同时,在标记形状不规范时,识别率可能有所降低,因此,本发明实施例中还提供另外一种实现方式,使用同一组数据来描述该标记操作。
这种方式下,该第一数据为一个坐标序列,该坐标序列中的每一个坐标对应于原始标记上的一个采样点,第一终端利用所有坐标序列即可形成该标记,同时其位置也唯一确定,至于该坐标序列中点的个数可以根据需要来确定,如果需要显示精细一些,则点可以多一些,否则可以少一些。
第二终端包括与所述主板连接的触摸屏时,该坐标序列即触摸屏采集到的指点物在标记操作过程中的在触摸屏上的操作点。
而该第二终端包括投影装置和拍摄装置,该坐标序列即激光点或手指(当然还可能是其它操作物)在第二图像中的坐标。
下面对实现方式一(该第一图像中仅包括一标记)的应用场景举例说明如下。
假定用户A当前在修理一机器,需要远程协助,但对方无法通过语音详细解释当前需要处理的部件具体在哪个位置,此时,用户A利用第一终端拍摄机器的原始图像,并传回给第二终端,第二终端展现该原始图像(如在触摸屏上显示,又或者投影),用户B对该原始图像进行标记操作,如在原始图像的X区域画一个圈,则第二终端根据用户的标记操作生成第一数据并返回给第一终端,该第一数据描述了一个圆以及圆的位置;
第一终端接收到第一数据后解析,得到包括该圆的图像后投影,该圆投影后,会在机器表面形成一个圈,用户就知道需要处理的部件在这个圆圈内,极大地提高了效率。
假定用户A当前在对患者进行诊治,需要远程协助,但对方无法通过语音详细解释当前需要处理的部位具体在腹部的哪个位置,此时,用户A利用第一终端拍摄患者腹部的图像,并传回给第二终端,第二终端展现该图像(如在触摸屏上显示,又或者投影),用户B对该腹部图像进行标记操作,如在图像的X区域画一个圈,则第二终端根据用户的标记操作生成第一数据并返回给第一终端,该第一数据描述了一个圆以及圆的位置;
第一终端接收到第一数据后解析,得到包括该圈的图像后投影,该圈投影后,会在患者的腹部形成一个圈,用户就知道需要处理的部位在这个圆圈内,极大地提高了效率。
假定用户A当前在学习烹饪,需要远程协助,但对方无法通过语音详细解释当前需要拿取哪一样食材,此时,用户A利用第一终端拍摄包括所有食材的图像,并传回给第二终端,第二终端展现该图像(如在触摸屏上显示,又或者投影),用户B对该图像进行标记操作,如在图像的X区域画一个箭头,则第二终端根据用户的标记操作生成第一数据并返回给第一终端,该第一数据描述了一个箭头以及箭头的位置;
第一终端接收到第一数据后解析,得到包括该箭头的图像后投影,该箭头投影后,会指向其中一个食材,用户就知道需要取用这种食材,极大地提高了效率。
对于上述的圆圈、箭头等如何形成、如何解析已经在前面详细说明。
对于上述的过程,要求使用第一终端的用户保持第一终端的位置不变,以保证将标记投影到正确的位置,对于如何保证标记投影合适的位置具体说明如下。
由于所述图像采集装置的图像采集区域的至少一部分被所述投影装置的投影区域所覆盖,下面以完全覆盖且第二终端在触摸屏上显示为例进行说明。
假定第一终端采集一原始图像,如图5a所示,假定分辨率为A×B,并将分辨率为A×B原始图像发送到第二终端;图5a中,外围的点划线形成的框为投影区域。
第二终端在触摸屏上显示该原始图像,分辨率为A×B;
用户利用指点物在原始图像上进行指点操作,第二终端记录指点物在标记操作过程中的轨迹(如图5b中的箭头),由数据生成装置根据该原始轨迹选择与之最接近的图形(如圆、对勾、三角形、方框等),并确定该选择得到的图形的在分辨率为A×B图像中的位置。
然后第二终端返回上述的图形及图形的在分辨率为A×B图像中的位置。
第一终端根据上述的信息重构一个图像A,分辨率也是A×B,如图5c所示。
然后进一步生成另外一个图像B(即第一图像)如图5d所示,该图像B中,图像B投影后,图像B的外围(在此假设为矩形,当然还可能是其他形状,这与实际的投影设备相关)正好与投影区域重合,而内部的包括箭头的矩形框被投影后,位于图像采集区域。
为了保证这一点,应该保证以下关系:
投影区域与图像采集区域按相对位置关系按比例缩放后,图像A与缩放后的投影区域重合,而图像B与缩放后的图像采集区域重合。
依据上述的过程,该箭头能够投影到实际工作面的中间的圆圈上,给用户非常直观的指示。
当然,第一终端拍摄原始图像时的位置与投影该图像时的位置不同时,该圆圈投影的位置会发生一定的错位,因此,要求用户A保持第一终端的位置不变,直至投影完成,但实际情况下,这很难保证,对于这种情况,本发明实施例中,对于这种情况提供如下的解决方案,所述图像生成装置具体包括:
第一图像生成模块,用于根据所述第一数据生成一待校准图像;
校准模块,用于根据终端运动信息生成一校准数据,并利用所述校准数据对所述待校准图像进行校准,得到所述第一图像。
举例说明如下,假定用户拍摄原始图像时,第一终端处于第一位置,而投影时,第一终端处于第二位置,在投影前,第一终端拍摄一个图像,根据原始图像与当前拍摄的图像差异可以计算得到终端的位移,并根据该位移对待校准图像进行校准,得到所述第一图像。假定移动终端向左移动了,则应该将所述待校准图像中的标记向右移动,得到所述第一图像,由于标记向右移动,可以弥补终端向左移动带来的位置偏差,使标记投影到正确的位置。
当然,对于实施方式一,所述图像采集装置的图像采集区域的至少一部分被所述投影装置的投影区域所覆盖,最理想的情况应该是图像采集装置的图像采集区域完全被所述投影装置的投影区域所覆盖。
<实施方式二>
在上述的实施方式一中,都是以投影标记为例进行的详细说明。
而在实现方式二中,所述第一数据为第二图像的图像数据,所述第二图像为所述第二终端将所述原始图像投影后,拍摄到的记录有对投影后的原始图像执行的标记操作的图像;
所述图像生成装置具体用于解析所述第二图像的图像数据,得到所述第一图像。
说明如下
该第二终端还包括:
与所述主板连接的投影装置,用于投影接收到的所述原始图像;
与所述主板连接的拍摄装置,用于拍摄记录有对投影后的原始图像执行的所述标记操作的第二图像;如用户利用激光笔在投影的图像上进行操作,又或者用户利用手指在投影的图像上进行指画操作。
该第二图像被记录后,即被发送到第一终端,第一终端解析第二图像的图像数据,并将解析得到的图象投影,即可还原用户的标记操作,即投影后图像不但包括原始图像,还包括在原始图像上的某一位置画的圈,或者标记的箭头等等。
在上面的所有说明中,都是以图像为例进行的说明,但应当理解的是,该图像可以是静态的图片,也可以是动态的视频。
对于动态的视频而言,只不过是对每一帧图像都进行上述处理,而在第一终端这一端就会看到标记的动态变化过程,举例说明如下。
如用户将拍摄钢琴键盘的图像,传送给远端,而远端协助者在图像上进行一系列操作如手指按照预定顺序放置到键盘图像(如第一时间手指指点第一键位,在第二时间手指指点第一键位,当然指示第一键位可以依据触摸屏上显示的图像进行指示,也可以依据投影后的图像进行指示)上,而远端协助端分别记录这些操作后按照顺序利用第一数据返回第一终端,第一终端可以将该一系列的手指动作投影到键盘,也可以是投影记录有手指动作和原始键盘图像的图像,此时,第一终端投影的图像即为一个动态的过程,用户即可逐步跟随学习。
本发明实施例的显示方法,如图4所示,包括:
步骤41,第一终端采集一原始图像;
步骤42,第一终端利用一通信协议将所述原始图像发送到第二终端;
步骤43,第一终端通过所述通信协议接收所述第二终端返回的第一数据;所述第一数据用于描述对所述第二终端接收到的所述原始图像执行的标记操作;
步骤44,第一终端根据所述第一数据生成至少包括一标记的第一图像;
步骤45,第一终端投影所述第一图像,以显示所述标记操作。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (12)

1.一种第一终端,其特征在于,包括:
主板;
与所述主板连接的显示屏;
与所述主板连接的图像采集装置,用于采集一原始图像;
与所述主板连接的第一通信装置,用于利用一通信协议将所述原始图像发送到第二终端,并通过所述通信协议接收所述第二终端返回的第一数据;所述第一数据用于描述对所述第二终端接收到的所述原始图像执行的标记操作;
与所述主板连接的图像生成装置,用于根据所述第一数据生成至少包括一标记的第一图像;
与所述主板连接的投影装置,用于投影所述第一图像,以显示所述标记操作。
2.根据权利要求1所述的第一终端,其特征在于:
所述图像采集装置的图像采集区域的至少一部分被所述投影装置的投影区域所覆盖;
所述图像采集装置用于从第一区域采集所述原始图像;
所述第一数据包括用于描述所述标记的形状信息的第二数据和用于描述所述标记的位置信息的第三数据;
所述图像生成装置具体用于根据所述第二数据和第三数据生成所述第一图像。
3.根据权利要求2所述的第一终端,其特征在于,所述第一数据具体为:根据对第二终端的展现所述原始图像的触摸屏执行的指点操作生成的数据。
4.根据权利要求2所述的第一终端,其特征在于,所述第一数据具体为:根据第二图像中记录的所述标记操作生成的数据,所述第二图像为所述第二终端将所述原始图像投影后,拍摄到的记录有对投影后的原始图像执行的所述标记操作的图像。
5.根据权利要求2、3或4所述的第一终端,其特征在于,所述图像生成装置具体包括:
第一图像生成模块,用于根据所述第一数据生成一待校准图像;
校准模块,用于根据所述第一终端在采集原始图像时至投影第一图像时的运动信息生成一校准数据,并利用所述校准数据对所述待校准图像进行校准,得到所述第一图像。
6.根据权利要求1所述的第一终端,其特征在于,所述第一数据为第二图像的图像数据,所述第二图像为所述第二终端将所述原始图像投影后,拍摄到的记录有对投影后的原始图像执行的标记操作的图像;
所述图像生成装置具体用于解析所述第二图像的图像数据,得到所述第一图像。
7.一种第二终端,其特征在于,包括:
主板;
与所述主板连接的显示屏;
与所述主板连接的第二通信装置,用于利用一通信协议从第一终端接收第一终端采集的原始图像;
与所述主板连接的数据生成装置,用于生成一第一数据,所述第一数据用于描述对所述第二通信装置接收到的所述原始图像执行的标记操作;
与所述主板连接的第三通信装置,用于通过所述通信协议向所述第一终端返回所述第一数据,使所述第一终端能根据所述第一数据生成至少包括一标记的第一图像后,投影所述第一图像,以显示所述标记操作。
8.根据权利要求7所述的第二终端,其特征在于,所述第一数据包括用于描述所述标记的形状信息的第二数据和用于描述所述标记的位置信息的第三数据。
9.根据权利要求8所述的第二终端,其特征在于,还包括:
与所述主板连接的触摸屏;
所述数据生成装置具体用于根据对展现所述原始图像的所述触摸屏执行的指点操作生成所述第一数据。
10.根据权利要求8所述的第二终端,其特征在于,还包括:
与所述主板连接的投影装置,用于投影所述原始图像;
与所述主板连接的拍摄装置,用于拍摄记录有对投影后的原始图像执行的所述标记操作的第二图像;
所述数据生成装置具体用于根据所述第二图像中记录的所述标记操作生成所述第一数据。
11.根据权利要求8所述的第二终端,其特征在于,还包括:
与所述主板连接的投影装置,用于投影所述原始图像;
与所述主板连接的拍摄装置,用于拍摄记录有对投影后的原始图像执行的所述标记操作的第二图像;
所述数据生成装置具体用于将所述第二图像的图像数据作为所述第一数据。
12.一种显示方法,其特征在于,包括:
第一终端采集一原始图像;
第一终端利用一通信协议将所述原始图像发送到第二终端;
第一终端通过所述通信协议接收所述第二终端返回的第一数据;所述第一数据用于描述对所述第二终端接收到的所述原始图像执行的标记操作;
第一终端根据所述第一数据生成至少包括一标记的第一图像;
第一终端投影所述第一图像,以显示所述标记操作。
CN2010101591195A 2010-04-22 2010-04-22 一种终端及其显示方法 Active CN102238361B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2010101591195A CN102238361B (zh) 2010-04-22 2010-04-22 一种终端及其显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010101591195A CN102238361B (zh) 2010-04-22 2010-04-22 一种终端及其显示方法

Publications (2)

Publication Number Publication Date
CN102238361A true CN102238361A (zh) 2011-11-09
CN102238361B CN102238361B (zh) 2013-07-31

Family

ID=44888515

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010101591195A Active CN102238361B (zh) 2010-04-22 2010-04-22 一种终端及其显示方法

Country Status (1)

Country Link
CN (1) CN102238361B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103513867A (zh) * 2012-06-19 2014-01-15 三星电子株式会社 电子设备中改变图像的装置和方法
CN103581589A (zh) * 2012-07-26 2014-02-12 深圳富泰宏精密工业有限公司 投影方法及系统
CN104685450A (zh) * 2013-02-07 2015-06-03 株式会社柳韩普利真 在演示系统中利用激光指示器的影像书写方法
CN104714790A (zh) * 2013-12-16 2015-06-17 联想(北京)有限公司 一种数据处理方法及电子设备
CN105607959A (zh) * 2014-11-17 2016-05-25 富士施乐株式会社 终端设备和故障报告系统
CN105913582A (zh) * 2016-06-20 2016-08-31 中国工商银行股份有限公司 自助服务终端和远程协助服务系统
CN106817379A (zh) * 2015-11-27 2017-06-09 谢成火 一种响应式反向远程拍摄方法、响应式反向远程拍摄服务装置
CN107707862A (zh) * 2017-05-25 2018-02-16 北京小米移动软件有限公司 视频远程协助的处理方法和装置、第一终端、第二终端
CN108595092A (zh) * 2018-04-27 2018-09-28 努比亚技术有限公司 图像处理方法、设备及计算机存储介质
CN111243763A (zh) * 2020-02-03 2020-06-05 深圳安泰创新科技股份有限公司 标记显示方法、装置、设备及计算机存储介质
CN112051833A (zh) * 2020-09-02 2020-12-08 上海星融汽车科技有限公司 诊断仪触屏的模拟系统及其方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020135536A1 (en) * 2001-03-22 2002-09-26 Koninklijke Philips Electronics N.V. Two-way presentation display system
JP2004096451A (ja) * 2002-08-30 2004-03-25 Seiko Epson Corp 画像データ生成装置、画像表示装置、画像データ生成プログラム、画像表示プログラム、画像データ生成方法及び画像表示方法
US20040201575A1 (en) * 2003-04-08 2004-10-14 Morrison Gerald D. Auto-aligning touch system and method
CN101281441A (zh) * 2008-05-19 2008-10-08 广州成沣信息科技有限公司 一种构造大屏幕多点触摸屏的系统和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020135536A1 (en) * 2001-03-22 2002-09-26 Koninklijke Philips Electronics N.V. Two-way presentation display system
JP2004096451A (ja) * 2002-08-30 2004-03-25 Seiko Epson Corp 画像データ生成装置、画像表示装置、画像データ生成プログラム、画像表示プログラム、画像データ生成方法及び画像表示方法
US20040201575A1 (en) * 2003-04-08 2004-10-14 Morrison Gerald D. Auto-aligning touch system and method
CN101281441A (zh) * 2008-05-19 2008-10-08 广州成沣信息科技有限公司 一种构造大屏幕多点触摸屏的系统和方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JOHNNY C. LEE ET AL: "Automatic Projector Calibration with Embedded Light Sensors", 《PROCEEDINGS OF THE 17TH ANNUAL ACM SYMPOSIUM ON USER INTERFACE SOFTWARE AND TECHNOLOGY》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103513867A (zh) * 2012-06-19 2014-01-15 三星电子株式会社 电子设备中改变图像的装置和方法
CN103581589A (zh) * 2012-07-26 2014-02-12 深圳富泰宏精密工业有限公司 投影方法及系统
CN103581589B (zh) * 2012-07-26 2018-09-07 深圳富泰宏精密工业有限公司 投影方法及系统
CN104685450B (zh) * 2013-02-07 2017-09-08 株式会社柳韩普利真 在演示系统中利用激光指示器的影像书写方法
CN104685450A (zh) * 2013-02-07 2015-06-03 株式会社柳韩普利真 在演示系统中利用激光指示器的影像书写方法
CN104714790A (zh) * 2013-12-16 2015-06-17 联想(北京)有限公司 一种数据处理方法及电子设备
CN105607959A (zh) * 2014-11-17 2016-05-25 富士施乐株式会社 终端设备和故障报告系统
CN105607959B (zh) * 2014-11-17 2019-03-08 富士施乐株式会社 终端设备和故障报告系统
CN106817379A (zh) * 2015-11-27 2017-06-09 谢成火 一种响应式反向远程拍摄方法、响应式反向远程拍摄服务装置
CN105913582A (zh) * 2016-06-20 2016-08-31 中国工商银行股份有限公司 自助服务终端和远程协助服务系统
CN107707862A (zh) * 2017-05-25 2018-02-16 北京小米移动软件有限公司 视频远程协助的处理方法和装置、第一终端、第二终端
CN108595092A (zh) * 2018-04-27 2018-09-28 努比亚技术有限公司 图像处理方法、设备及计算机存储介质
CN111243763A (zh) * 2020-02-03 2020-06-05 深圳安泰创新科技股份有限公司 标记显示方法、装置、设备及计算机存储介质
CN111243763B (zh) * 2020-02-03 2023-09-22 深圳安泰创新科技股份有限公司 标记显示方法、装置、设备及计算机存储介质
CN112051833A (zh) * 2020-09-02 2020-12-08 上海星融汽车科技有限公司 诊断仪触屏的模拟系统及其方法

Also Published As

Publication number Publication date
CN102238361B (zh) 2013-07-31

Similar Documents

Publication Publication Date Title
CN102238361B (zh) 一种终端及其显示方法
CN102693047B (zh) 在协同环境中显示数字信息和图像的方法
CN109561271B (zh) 一种终端操作的指导方法、第一终端及第二终端
US10295896B2 (en) Display system, display device, display terminal, display method of display terminal, and control program
CN107621893A (zh) 在非电子表面上使用电子输入设备的内容创建
CN102253737A (zh) 一种屏幕视觉鼠标系统及其实现方法
CN101477440A (zh) 屏幕截图方法和屏幕截图系统
TW201723762A (zh) 拼接式觸控螢幕裝置及其觸控螢幕的觸控偵測方法
CN104598048A (zh) 数位笔书写控制方法及系统
JP6238648B2 (ja) 情報処理装置、情報処理方法、及びプログラム
CN106060528A (zh) 基于手机端和电子白板的增强现实方法及系统
CN111901518B (zh) 显示方法、装置和电子设备
KR101964192B1 (ko) 시뮬레이션용 스마트 테이블 장치
CN110519517B (zh) 临摹引导方法、电子设备及计算机可读存储介质
CN112118436A (zh) 一种基于增强现实装置的图像呈现方法、装置及系统
CN102880361B (zh) 电子白板设备的定位校准方法
CN103853470B (zh) 数据处理和显示方法及设备
CN112565844B (zh) 视频通信方法、装置和电子设备
US20130076622A1 (en) Method and apparatus for determining input
CN102778998B (zh) 一种交互方法,设备及系统
CN112529770B (zh) 图像处理方法、装置、电子设备和可读存储介质
CN107329578A (zh) 一种手势识别装置、远程写字系统及其应用方法
CN113780051A (zh) 评估学生专注度的方法和装置
KR101566113B1 (ko) 와치 타입의 이동 단말기 및 그 제어방법
CN113902747A (zh) 图像处理方法、计算机可读存储介质以及计算设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant