CN110536094A - 一种在视频通话过程中传递信息的方法与设备 - Google Patents

一种在视频通话过程中传递信息的方法与设备 Download PDF

Info

Publication number
CN110536094A
CN110536094A CN201910798097.8A CN201910798097A CN110536094A CN 110536094 A CN110536094 A CN 110536094A CN 201910798097 A CN201910798097 A CN 201910798097A CN 110536094 A CN110536094 A CN 110536094A
Authority
CN
China
Prior art keywords
touch
terminal
information
user
sequence information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910798097.8A
Other languages
English (en)
Inventor
王寒莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sheng Electronic Payment Services Ltd
Original Assignee
Shanghai Sheng Electronic Payment Services Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sheng Electronic Payment Services Ltd filed Critical Shanghai Sheng Electronic Payment Services Ltd
Priority to CN201910798097.8A priority Critical patent/CN110536094A/zh
Publication of CN110536094A publication Critical patent/CN110536094A/zh
Priority to PCT/CN2020/102254 priority patent/WO2021036561A1/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145Handheld terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本申请的目的是提供一种在视频通话过程中传递信息的方法,该方法包括:响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配;通过所述长连接将所述触控序列信息发送至所述第二终端。本申请提升了信息传递的有效性和灵活性,提升了用户的体验。

Description

一种在视频通话过程中传递信息的方法与设备
技术领域
本申请涉及通信领域,尤其涉及一种在视频通话过程中传递信息的技术。
背景技术
随着移动互联网的发展,人们可以通过移动设备(例如,手机、平板)进行视频通话,在视频通话过程中可以保证实时的语音信息以及图像信息的传播,方便了用户之间进行实时沟通,目前,视频通话的基本功能包括显示用户双方的视频图像、最小化视频界面、切换摄像头以及结束视频通话等。
发明内容
本申请的一个目的是提供一种在视频通话过程中传递信息的方法与设备。
根据本申请的一个方面,提供了一种在视频通话过程中传递信息的方法,应用于第一终端,该方法包括:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配;
通过所述长连接将所述触控序列信息发送至所述第二终端。
根据本申请的另一个方面,提供了一种在视频通话过程中传递信息的方法,应用于第二终端,该方法包括:
在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通过过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息;
基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
根据本申请的一个方面,提供了一种在视频通话过程中传递信息的方法,该方法包括:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,所述第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,所述第一终端实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配,并通过所述长连接将所述触控序列信息发送至所述第二终端。
所述第二终端接收所述第一终端发送的触控序列信息,并基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
根据本申请的一个方面,提供了一种在视频通话过程中传递信息的第一终端,该设备包括:
一一模块,用于响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;
一二模块,用于响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配;
一三模块,用于通过所述长连接将所述触控序列信息发送至所述第二终端。
根据本申请的另一个方面,提供了一种在视频通话过程中传递信息的第二终端,该设备包括:
二一模块,用于在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通过过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息;
二二模块,用于基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
根据本申请的一个方面,提供了一种在视频通话过程中传递信息的第一终端,其中,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配;
通过所述长连接将所述触控序列信息发送至所述第二终端。
根据本申请的另一个方面,提供了一种在视频通话过程中传递信息的第二终端,其中,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行:
在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通过过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息;
基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
根据本申请的一个方面,提供了存储指令的计算机可读介质,所述指令在被执行时使得系统进行:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配;
通过所述长连接将所述触控序列信息发送至所述第二终端。
根据本申请的另一个方面,提供了存储指令的计算机可读介质,所述指令在被执行时使得系统进行:
在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通过过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息;
基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
与现有技术相比,本申请在第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接的基础上,根据第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,随后通过所述长连接将所述触控序列信息发送至所述第二终端。其中,通过长连接进行通信可以保证后续实时传输触控序列信息,本申请可以在不影响用户进行视频通话的情况下,实时传递触控轨迹信息至对方用户,同时不限制触控轨迹信息的形态,提升了信息传递的有效性和灵活性,提升了用户的体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1a示出根据本申请的一个场景示意图;
图1b示出根据本申请的又一个场景示意图;
图2示出根据本申请的一个实施例的一种在视频通话过程中传递信息的系统流程图;
图3示出根据本申请又一个实施例的一种在视频通话过程中传递信息的方法流程图,应用于第一终端;
图4示出根据本申请另一个实施例的一种在视频通话过程中传递信息的方法流程图,应用于第二终端;
图5示出根据本申请再一个实施例的一种在视频通话过程中传递信息的方法流程图;
图6示出根据本申请一个实施例的一种在视频通话过程中传递信息的第一终端的设备示意图;
图7示出根据本申请又一个实施例的一种在视频通话过程中传递信息的第二终端的设备示意图;
图8示出根据本申请又一个实施例的一种在视频通话过程中传递信息的系统设备的设备示意图;
图9示出可被用于实施本申请中所述的各个实施例的示例性系统。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
下面结合附图对本申请作进一步详细描述。
在本申请一个典型的配置中,终端、服务网络的设备和可信方均包括一个或多个处理器(例如,中央处理器(Central Processing Unit,CPU))、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RandomAccess Memory,RAM)和/或非易失性内存等形式,如只读存储器(Read Only Memory,ROM)或闪存(Flash Memory)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(Phase-Change Memory,PCM)、可编程随机存取存储器(Programmable Random Access Memory,PRAM)、静态随机存取存储器(Static Random-Access Memory,SRAM)、动态随机存取存储器(Dynamic Random AccessMemory,DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(Compact Disc Read-Only Memory,CD-ROM)、数字多功能光盘(Digital Versatile Disc,DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。
本申请所指设备包括但不限于用户设备、网络设备、或用户设备与网络设备通过网络相集成所构成的设备。所述用户设备包括但不限于任何一种可与用户进行人机交互(例如通过触摸板进行人机交互)的移动电子产品,例如智能手机、平板电脑等,所述移动电子产品可以采用任意操作系统,如Android操作系统、iOS操作系统等。其中,所述网络设备包括一种能够按照事先设定或存储的指令,自动进行数值计算和信息处理的电子设备,其硬件包括但不限于微处理器、专用集成电路(Application Specific IntegratedCircuit,ASIC)、可编程逻辑器件(Programmable Logic Device,PLD)、现场可编程门阵列(Field Programmable Gate Array,FPGA)、数字信号处理器(Digital Signal Processor,DSP)、嵌入式设备等。所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云;在此,云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述网络包括但不限于互联网、广域网、城域网、局域网、VPN网络、无线自组织网络(Ad Hoc网络)等。优选地,所述设备还可以是运行于所述用户设备、网络设备、或用户设备与网络设备、网络设备、触摸终端或网络设备与触摸终端通过网络相集成所构成的设备上的程序。
当然,本领域技术人员应能理解上述设备仅为举例,其他现有的或今后可能出现的设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在本申请的描述中,“多个”的含义是两个或者更多,除非另有明确具体的限定。
图1a示出了本申请的一个典型场景,第一用户持有第一终端,当前第一终端与第二用户持有的第二终端正保持视频通话连接,响应于第一用户在与第二用户的视频通话过程中的消息触发操作,第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接,其中,所述消息触发操作包括但不限于在视频通话界面中对预设按钮的触发操作、预定手势操作(例如,上下左右滑动等)以及视频通话过程中的语音关键词触发操作,所述长连接本质上是TCP长连接,将http协议设置connection:keep-alive,保持长连接是为了加快网络内容传递速度。在所述长连接被建立的基础上,响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,第一终端实时记录触控轨迹(例如,“爱心滑动轨迹”),并在所述第一终端的视频通话界面上实时显示所述触控操作对应的触控轨迹,并实时生成所述触控操作对应的触控序列信息,随后第一终端将生成的触控序列信息通过所述长连接发送至所述第二终端。图1b示出了本申请的又一个典型场景,第二终端接收该触控序列信息,并基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的触控轨迹(例如,对应的“爱心触控轨迹”)其中,所述第一终端以及第二终端包括但不限于手机、平板等具有触控屏幕的计算设备。
图2示出根据本申请的一个实施例的一种在视频通话过程中传递信息的方法,其中,该方法包括:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,所述第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,所述第一终端实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配,并通过所述长连接将所述触控序列信息发送至所述第二终端。
所述第二终端接收所述第一终端发送的触控序列信息,并基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
图3示出根据本申请的一个实施例的一种在视频通话过程中传递信息的方法,应用于第一终端,所述方法包括步骤S101、步骤S102和步骤S103。在步骤S101中,第一终端响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;在步骤S102中,第一终端响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述触控轨迹相匹配;在步骤S103中,第一终端通过所述长连接将所述触控序列信息发送至所述第二终端。
具体地,在步骤S101中,第一终端响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接。例如,所述消息触发操作包括但不限于在视频通话界面中对预设按钮的触发操作、预定手势操作(例如,上下左右触控等)以及视频通话过程中的语音关键词触发操作,第一终端将http协议设置connection:keep-alive,其中,所述长连接本质上是TCP长连接,保持长连接是为了加快网络内容传递速度。在一些实施例中,所述建立所述第一终端与所述第二用户使用的第二终端间的长连接,包括:向所述第一终端对应的服务器发送建立所述第一终端与所述第二用户使用的第二终端间长连接的指令信息,以使得所述服务器根据所述指令信息绑定第一长连接和第二长连接以建立所述第一终端与所述第二终端间的长连接,其中,所述第一长连接为所述服务器与所述第一终端之间的长连接,所述第二长连接为所述服务器与所述第二终端之间的长连接。。其中,该指令信息不受第一终端与服务器之间的第一长连接限制,同时,服务器主动建立与第一终端以及第二终端之间的连接,提升了进行长连接的效率。例如,第一终端与第二终端之间的长连接通过中间服务器来分别构建第一长连接以及第二长连接,随后第一长连接与第二长连接进行绑定构成第一终端与第二终端之间长连接,通过中间服务器构建第一终端与第二终端之间长连接可以保证第一终端与第二终端视频通话顺利的情况下后续触控序列信息也能实时传输。在一些实施例中,所述方法还包括步骤S104(未示出),在步骤S104中,建立所述第一终端与所述服务器间的第一长连接;其中,所述向所述第一终端对应的服务器发送建立所述第一终端与所述第二用户使用的第二终端间长连接的指令信息,包括:通过所述第一长连接向所述服务器发送关于所述第二长连接的建立并绑定指令,其中,所述服务器根据所述建立并绑定指令建立所述第二终端与所述服务器间的所述第二长连接,并将所述第一长连接与所述第二长连接相绑定,以建立所述第一终端与所述第二终端间的长连接。例如,在第一终端与所述服务器间建立第一长连接的前提下,服务器接收第一终端发送的关于所述第二长连接的建立并绑定指令,在中间服务器与第一终端建立第一长连接以及与第二终端建立第二长连接的情况下,为后续第一终端与第二终端之间建立长连接提供基础。
在步骤S102中,第一终端响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述触控轨迹相匹配。其中,所述触控操作包括不限于用户在视频通话界面中的点操作、上下左右各方位的移动操作。例如,第一终端响应于第一用户在与第二用户的视频通话过程中的消息触发操作,第一终端根据第一用户在所述第一终端的视频通话界面上的触控操作实时记录所述触控操作对应的触控序列信息,随后在所述第一终端的视频通话界面上实时显示所述触控轨迹,其中,该触控序列信息绘制的轨迹与该触控轨迹基本重合。在一些实施例中,所述触控序列信息包括以下至少一项:
1)预定字符串中的路径信息;
2)预定字符串中的触控属性信息;
例如,所述触控序列信息包括预定字符串信息,所述预定字符串包括但不限于json、数组。所述路径信息包括第一终端预先设置初始点位置,随后以初始点位置作为起点坐标获取当前触控轨迹的轨迹坐标,以此作为路径信息。所述触控属性信息包括但不限于触控轨迹的宽度、色彩以及线条粗细。所述触控序列信息为后续第二终端进行呈现触控轨迹的基础。
在一些实施例中,所述方法还包括步骤S105(未示出),在步骤S105中,第一终端获取所述第一用户在所述视频通话过程中的语音信息;在步骤S102中,第一终端响应于检测到所述第一用户在所述第一终端的视频通话界面上的触控操作,生成所述触控操作对应的第二触控轨迹;根据所述语音信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹;在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并基于所述第一触控轨迹实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述触控轨迹相匹配。例如,在第一用户与第二用户视频通话过程中,若第一终端检测到所述第一用户在所述第一终端的视频通话界面上的触控操作,生成所述触控操作对应的第二触控轨迹,同时结合第一终端获取的语音信息(例如,“圆形”、“画个圆形”、“写个圆字给你看”),第一终端根据与圆形类似的第二触控轨迹进行智能纠正,生成所述触控操作对应的第一触控轨迹(例如,矫正第二触控轨迹后生成的完整的圆形),并在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹。随后,第一终端根据该第一触控轨迹(例如,矫正第二触控轨迹后生成的完整的圆形)生成所述触控操作对应的触控序列信息。在配合用户的语音信息进行触控轨迹矫正的情况下,可以将触控轨迹更加完整形象的进行呈现,提升用户的使用体验。在一些实施例中,所述根据所述语音信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:提取所述语音信息中的关键词信息;根据所述关键词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹。在一些实施例中,所述关键词信息包括以下至少任一项:预定图形关键词(例如,圆形、正方形、曲线);预定动作关键词(例如、画、涂等);预定行为关键词(例如,画个圆形、画个正方形)。例如,第一终端根据语音信息中的关键词信息进行智能纠正,生成所述触控操作对应的触控轨迹。在配合用户的语音信息进行触控轨迹矫正的情况下,可以将触控轨迹更加完整形象的进行呈现,提升用户的使用体验。在一些实施例中,所述根据所述关键词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:检测所述关键词信息中的预定名词信息;根据所述预定名词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,其中,所述预定名词信息与第一触控轨迹相匹配。例如,第一终端获取语音信息中的关键词信息,随后检测所述关键词信息中是否有预定的名词信息(例如,“椭圆形”等),随后根据该预定名词信息矫正所述第二触控轨迹信息以生成所述触控操作对应的第一触控轨迹(例如,将当前触笔模糊的第二触控轨迹调整为“椭圆形”的第一触控轨迹)。在配合用户的语音信息进行触控轨迹矫正的情况下,可以将触控轨迹更加完整形象的进行呈现,提升用户的使用体验。在一些实施例中,所述根据所述预定名词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:根据所述预定名词信息确定对应的轨迹信息;通过所述轨迹信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹。其中,所述预定名词信息包括形状信息(例如,“椭圆形”)、物体信息(例如,“盒子”)等。第一终端根据预定名词信息(例如,“椭圆形”)确定对应的轨迹信息(例如,椭圆形轨迹),并参照椭圆形轨迹的轨迹形状修正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹。在配合用户的语音信息进行触控轨迹矫正的情况下,可以将触控轨迹更加完整形象的进行呈现,提升用户的使用体验。
在步骤S103中,第一终端通过所述长连接将所述触控序列信息发送至所述第二终端。在第一终端与所述第二用户使用的第二终端建立长连接的情况下,可以保持通信的不中断,保证了实时传输任意时刻的触控序列信息。在一些实施例中,在步骤S103中,第一终端利用心跳检测规则获取新生成的所述触控序列信息;并通过所述长连接将新生成的所述触控序列信息发送至所述第二终端。其中,所述心跳检测规则包括第一终端每隔预定时间段阈值获取一次新生成的触控序列信息,在通过心跳检测规则实时获取触控序列信息的前提下,第一终端可以实时的将新生成的触控序列信息发送至第二终端,以便第二终端可以实时呈现触控轨迹。
例如,第一用户持有第一终端,当前第一终端与第二用户持有的第二终端正保持视频通话连接,响应于第一用户在与第二用户的视频通话过程中的对预设按钮的点击操作,第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接,响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,第一终端实时记录触控轨迹,并在所述第一终端的视频通话界面上实时显示所述触控操作对应的触控轨迹(例如,对应的“线条触控轨迹”),并实时生成所述触控操作对应的触控序列信息,例如,所述触控序列信息以json串或者数组的形式表示(例如,{xyz:’0,0,0’,color:’#ffffff’,weight:‘1px’,path:’000,001,002,120’}),随后第一终端将生成的触控序列信息通过所述长连接发送至所述第二终端。第二终端接收该触控序列信息,并基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的触控轨迹(例如,对应的“线条触控轨迹”)。
在一些实施例中,所述方法还包括步骤S106(未示出),在步骤S106中,若在预定时间阈值内未检测到所述第一用户在所述第一终端的视频通话界面上的触控操作,第一终端在所述第一终端的视频通话界面上隐藏所述第一触控轨迹。例如,若在预定时间阈值内(例如,2s)未检测到所述第一用户在所述第一终端的视频通话界面上的触控操作(例如,用户未触摸视频通话界面的时间达到2s),第一终端确认此次触控操作结束,并设置第一触控轨迹逐渐消失直至隐藏。在这种情况下,给与用户直观的实验体验。
图4示出根据本申请的一个实施例的一种在视频通话过程中传递信息的方法,应用于第二终端,所述方法包括步骤S201和步骤S202。在步骤S201中,第二终端在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通话过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息;在步骤S202中,第二终端基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的触控轨迹。
具体地,在步骤S201中,第二终端在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通话过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息。其中,所述长连接本质上是TCP长连接,保持长连接是为了加快网络内容传递速度,第一终端将http协议设置connection:keep-alive以建立与第二终端的长连接,随后通过所述长连接将所述触控序列信息发送至第二终端,例如,所述触控序列信息是第一终端响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,根据触控轨迹生成的与所述触控操作对应的触控序列信息。
在步骤S202中,第二终端基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的触控轨迹。其中,所述触控序列信息包括预定字符串中的路径信息以及预定字符串中的触控属性信息。第二终端根据触控序列信息中包括的路径以及属性信息绘制触控轨迹并呈现触控轨迹。提升了信息传递的有效性和灵活性,提升了用户的体验。
例如,第一用户持有第一终端,当前第一终端与第二用户持有的第二终端正保持视频通话连接,响应于第一用户在与第二用户的视频通话过程中的对预设按钮的点击操作,第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接,响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,第一终端实时记录触控轨迹,并在所述第一终端的视频通话界面上实时显示所述触控操作对应的触控轨迹(例如,对应的“线条触控轨迹”),并实时生成所述触控操作对应的触控序列信息,例如,所述触控序列信息以json串或者数组的形式表示(例如,{xyz:’0,0,0’,color:’#ffffff’,weight:‘1px’,path:’000,001,002,120’}),随后第一终端将生成的触控序列信息通过所述长连接发送至所述第二终端。第二终端接收该触控序列信息,并基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的触控轨迹(例如,对应的“线条触控轨迹”)。
在一些实施例中,所述方法还包括步骤S203(未示出),在步骤S203中,第二终端通过所述长连接获取所述第一终端新生成的触控序列信息;通过所述长连接从所述第一终端中实时获取触控状态信息;若所述触控状态信息为消息增强模式,根据所述新生成的触控序列信息呈现对应的新生成的第一触控轨迹,所述新生成的触控序列信息与所述新生成的第一触控轨迹相匹配。例如,第一终端利用心跳检测规则获取新生成的所述触控序列信息;并通过所述长连接将新生成的所述触控序列信息发送至所述第二终端。同时,第二终端从第一终端获取触控状态信息,其中,所述触控状态信息包括消息增强模式(例如,允许用户在视频通话过程中在视频通话界面上进行触控操作以显示触控轨迹)或者退出触控状态模式。若所述触控状态信息为消息增强模式,根据所述新生成的触控序列信息呈现对应的新生成的第一触控轨迹,例如,若所述触控状态信息为消息增强模式,第二终端确认第二终端可以根据新生成的触控序列信息呈现对应的新生成的第一触控轨迹。在这种情况下,实时传递第一终端的触控轨迹信息并实时呈现所述触控轨迹在第二终端,保证了终端之间的同步性和一致性。
图5示出根据本申请的另一个实施例的一种在视频通话过程中传递信息的方法流程图,第一用户持有第一终端,当前第一终端与第二用户持有的第二终端正保持视频通话连接,响应于第一用户在与第二用户的视频通话过程中的消息触发操作(例如,编辑操作),第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接,并保持心跳查询,其中,所述第一终端与第二终端间的长连接由中间的服务器来进行搭建。在所述长连接被建立的基础上,响应于所述第一用户在所述第一终端的视频通话界面上的触控操作(例如,绘图操作),第一终端实时记录绘图轨迹(例如,“圆形绘图”),并在所述第一终端的视频通话界面上实时显示所述绘图操作对应的圆形轨迹,并实时生成所述绘图操作对应的触控序列信息(绘图序列信息),其中,所述绘图序列信息以json串的形式保存,随后第一终端将生成的绘图序列信息通过所述长连接发送至中间的服务器。第二终端实时向服务器查询绘图状态信息,若所述绘图状态信息发生变化,第二终端获取生成的绘图序列信息,并根据该绘图序列信息进行绘图(例如,“圆形绘图”)。
图6示出根据本申请的一个实施例的一种在视频通话过程中传递信息的第一终端,所述第一终端包括一一模块101、一二模块102和一三模块103。一一模块101,用于响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;一二模块102,用于响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述触控轨迹相匹配;一三模块103,用于通过所述长连接将所述触控序列信息发送至所述第二终端。
具体地,一一模块101,用于响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接。例如,所述消息触发操作包括但不限于在视频通话界面中对预设按钮的触发操作、预定手势操作(例如,上下左右触控等)以及视频通话过程中的语音关键词触发操作,第一终端将http协议设置connection:keep-alive,其中,所述长连接本质上是TCP长连接,保持长连接是为了加快网络内容传递速度。在一些实施例中,所述建立所述第一终端与所述第二用户使用的第二终端间的长连接,包括::向所述第一终端对应的服务器发送建立所述第一终端与所述第二用户使用的第二终端间长连接的指令信息,以使得所述服务器根据所述指令信息绑定第一长连接和第二长连接以建立所述第一终端与所述第二终端间的长连接,其中,所述第一长连接为所述服务器与所述第一终端之间的长连接,所述第二长连接为所述服务器与所述第二终端之间的长连接。在此,相关所述建立所述第一终端与所述第二用户使用的第二终端间的长连接的操作与图3所示实施例相同或相近,故不再赘述,在此以引用方式包含于此。在一些实施例中,所述第一终端还包括一四模块104(未示出),一四模块104,用于建立所述第一终端与所述服务器间的第一长连接;其中,所述向所述第一终端对应的服务器发送建立所述第一终端与所述第二用户使用的第二终端间长连接的指令信息,包括:通过所述第一长连接向所述服务器发送关于所述第二长连接的建立并绑定指令,其中,所述服务器根据所述建立并绑定指令建立所述第二终端与所述服务器间的所述第二长连接,并将所述第一长连接与所述第二长连接相绑定,以建立所述第一终端与所述第二终端间的长连接。有关上述一四模块104的具体实现方式的示例与图3中有关步骤S104的实施例相同或相近,故不再赘述,在此以引用方式包含于此。
一二模块102,用于响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述触控轨迹相匹配。其中,所述触控操作包括不限于用户在视频通话界面中的点操作、上下左右各方位的移动操作。例如,第一终端响应于第一用户在与第二用户的视频通话过程中的消息触发操作,第一终端根据第一用户在所述第一终端的视频通话界面上的触控操作实时记录所述触控操作对应的触控序列信息,随后在所述第一终端的视频通话界面上实时显示所述触控轨迹,其中,该触控序列信息绘制的轨迹与该触控轨迹基本重合。在一些实施例中,所述触控序列信息包括以下至少一项:
1)预定字符串中的路径信息;
2)预定字符串中的触控属性信息;在此,相关触控序列信息的操作与图3所示实施例相同或相近,故不再赘述,在此以引用方式包含于此。
在一些实施例中,所述第一终端还包括一五模块105(未示出),一五模块105,用于获取所述第一用户在所述视频通话过程中的语音信息;一二模块102,用于响应于检测到所述第一用户在所述第一终端的视频通话界面上的触控操作,生成所述触控操作对应的第二触控轨迹;根据所述语音信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹;在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并基于所述第一触控轨迹实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述触控轨迹相匹配。有关上述一五模块105的具体实现方式的示例与图3中有关步骤S105的实施例相同或相近,故不再赘述,在此以引用方式包含于此。在一些实施例中,所述根据所述语音信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:提取所述语音信息中的关键词信息;根据所述关键词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹。在此,相关所述根据所述语音信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹的操作与图3所示实施例相同或相近,故不再赘述,在此以引用方式包含于此。在一些实施例中,所述根据所述关键词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:检测所述关键词信息中的预定名词信息;根据所述预定名词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,其中,所述预定名词信息与第一触控轨迹相匹配。在此,相关所述根据所述关键词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹的操作与图3所示实施例相同或相近,故不再赘述,在此以引用方式包含于此。在一些实施例中,所述根据所述预定名词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:根据所述预定名词信息确定对应的轨迹信息;通过所述轨迹信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹。在此,相关所述根据所述预定名词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹的操作与图3所示实施例相同或相近,故不再赘述,在此以引用方式包含于此。
一三模块103,用于通过所述长连接将所述触控序列信息发送至所述第二终端。在第一终端与所述第二用户使用的第二终端建立长连接的情况下,可以保持通信的不中断,保证了实时传输任意时刻的触控序列信息。在一些实施例中,一三模块103,用于利用心跳检测规则获取新生成的所述触控序列信息;并通过所述长连接将新生成的所述触控序列信息发送至所述第二终端。在此,相关利用心跳检测规则获取新生成的所述触控序列信息的操作与图3所示实施例相同或相近,故不再赘述,在此以引用方式包含于此。
在此,有关上述一一模块101、一二模块102、一三模块103的具体实现方式的示例与图3中有关步骤S101、S102、S103的实施例相同或相近,故不再赘述,在此以引用方式包含于此。
在一些实施例中,所述第一终端还包括一六模块106(未示出),一六模块106,用于若在预定时间阈值内未检测到所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上隐藏所述第一触控轨迹。所述一六模块106的具体实现方式与前述步骤S106的实施例相同或相近,故不再赘述,在此以引用方式包含于此。
图7示出根据本申请的一个实施例的一种在视频通话过程中传递信息的第二终端,所述第二终端包括二一模块201和二二模块202。二一模块201,用于在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通过过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息;二二模块202,用于基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的触控轨迹。
具体地,二一模块201,用于在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通过过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息。其中,所述长连接本质上是TCP长连接,保持长连接是为了加快网络内容传递速度,第一终端将http协议设置connection:keep-alive以建立与第二终端的长连接,随后通过所述长连接将所述触控序列信息发送至第二终端,例如,所述触控序列信息是第一终端响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,根据触控轨迹生成的与所述触控操作对应的触控序列信息。
二二模块202,用于基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的触控轨迹。其中,所述触控序列信息包括预定字符串中的路径信息以及预定字符串中的触控属性信息。第二终端根据触控序列信息中包括的路径以及属性信息绘制触控轨迹并呈现触控轨迹。提升了信息传递的有效性和灵活性,提升了用户的体验。
在此,有关上述二一模块201和二二模块202的具体实现方式的示例与图4中有关步骤S201和S202的实施例相同或相近,故不再赘述,在此以引用方式包含于此。
在一些实施例中,所述第二终端还包括二三模块203(未示出),二三模块203,用于通过所述长连接获取所述第一终端新生成的触控序列信息;通过所述长连接从所述第一终端中实时获取触控状态信息;若所述触控状态信息为消息增强模式,根据所述新生成的触控序列信息呈现对应的新生成的第一触控轨迹,所述新生成的触控序列信息与所述新生成的第一触控轨迹相匹配。所述二三模块203的具体实现方式与前述步骤S203的实施例相同或相近,故不再赘述,在此以引用方式包含于此。
图7示出根据本申请的一个实施例的一种在视频通话过程中传递信息的系统设备,其中,该系统包括:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,所述第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,所述第一终端实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配,并通过所述长连接将所述触控序列信息发送至所述第二终端。
所述第二终端接收所述第一终端发送的触控序列信息,并基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
除上述各实施例介绍的方法和设备外,本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机代码,当所述计算机代码被执行时,如前任一项所述的方法被执行。
本申请还提供了一种计算机程序产品,当所述计算机程序产品被计算机设备执行时,如前任一项所述的方法被执行。
本申请还提供了一种计算机设备,所述计算机设备包括:
一个或多个处理器;
存储器,用于存储一个或多个计算机程序;
当所述一个或多个计算机程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如前任一项所述的方法。
图8示出了可被用于实施本申请中所述的各个实施例的示例性系统;
如图8所示在一些实施例中,系统300能够作为各所述实施例中的任意一个设备。在一些实施例中,系统300可包括具有指令的一个或多个计算机可读介质(例如,系统存储器或NVM/存储设备320)以及与该一个或多个计算机可读介质耦合并被配置为执行指令以实现模块从而执行本申请中所述的动作的一个或多个处理器(例如,(一个或多个)处理器305)。
对于一个实施例,系统控制模块310可包括任意适当的接口控制器,以向(一个或多个)处理器305中的至少一个和/或与系统控制模块310通信的任意适当的设备或组件提供任意适当的接口。
系统控制模块310可包括存储器控制器模块330,以向系统存储器315提供接口。存储器控制器模块330可以是硬件模块、软件模块和/或固件模块。
系统存储器315可被用于例如为系统300加载和存储数据和/或指令。对于一个实施例,系统存储器315可包括任意适当的易失性存储器,例如,适当的DRAM。在一些实施例中,系统存储器315可包括双倍数据速率类型四同步动态随机存取存储器(DDR4SDRAM)。
对于一个实施例,系统控制模块310可包括一个或多个输入/输出(I/O)控制器,以向NVM/存储设备320及(一个或多个)通信接口325提供接口。
例如,NVM/存储设备320可被用于存储数据和/或指令。NVM/存储设备320可包括任意适当的非易失性存储器(例如,闪存)和/或可包括任意适当的(一个或多个)非易失性存储设备(例如,一个或多个硬盘驱动器(HDD)、一个或多个光盘(CD)驱动器和/或一个或多个数字通用光盘(DVD)驱动器)。
NVM/存储设备320可包括在物理上作为系统300被安装在其上的设备的一部分的存储资源,或者其可被该设备访问而不必作为该设备的一部分。例如,NVM/存储设备320可通过网络经由(一个或多个)通信接口325进行访问。
(一个或多个)通信接口325可为系统300提供接口以通过一个或多个网络和/或与任意其他适当的设备通信。系统300可根据一个或多个无线网络标准和/或协议中的任意标准和/或协议来与无线网络的一个或多个组件进行无线通信。
对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器(例如,存储器控制器模块330)的逻辑封装在一起。对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑封装在一起以形成系统级封装(SiP)。对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上。对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上以形成片上系统(SoC)。
在各个实施例中,系统300可以但不限于是:服务器、工作站、台式计算设备或移动计算设备(例如,膝上型计算设备、手持计算设备、平板电脑、上网本等)。在各个实施例中,系统300可具有更多或更少的组件和/或不同的架构。例如,在一些实施例中,系统300包括一个或多个摄像机、键盘、液晶显示器(LCD)屏幕(包括触屏显示器)、非易失性存储器端口、多个天线、图形芯片、专用集成电路(ASIC)和扬声器。
需要注意的是,本申请可在软件和/或软件与硬件的组合体中被实施,例如,可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中,本申请的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地,本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中,例如,RAM存储器,磁或光驱动器或软磁盘及类似设备。另外,本申请的一些步骤或功能可采用硬件来实现,例如,作为与处理器配合从而执行各个步骤或功能的电路。
另外,本申请的一部分可被应用为计算机程序产品,例如计算机程序指令,当其被计算机执行时,通过该计算机的操作,可以调用或提供根据本申请的方法和/或技术方案。本领域技术人员应能理解,计算机程序指令在计算机可读介质中的存在形式包括但不限于源文件、可执行文件、安装包文件等,相应地,计算机程序指令被计算机执行的方式包括但不限于:该计算机直接执行该指令,或者该计算机编译该指令后再执行对应的编译后程序,或者该计算机读取并执行该指令,或者该计算机读取并安装该指令后再执行对应的安装后程序。在此,计算机可读介质可以是可供计算机访问的任意可用的计算机可读存储介质或通信介质。
通信介质包括藉此包含例如计算机可读指令、数据结构、程序模块或其他数据的通信信号被从一个系统传送到另一系统的介质。通信介质可包括有导的传输介质(诸如电缆和线(例如,光纤、同轴等))和能传播能量波的无线(未有导的传输)介质,诸如声音、电磁、RF、微波和红外。计算机可读指令、数据结构、程序模块或其他数据可被体现为例如无线介质(诸如载波或诸如被体现为扩展频谱技术的一部分的类似机制)中的已调制数据信号。术语“已调制数据信号”指的是其一个或多个特征以在信号中编码信息的方式被更改或设定的信号。调制可以是模拟的、数字的或混合调制技术。
作为示例而非限制,计算机可读存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动的介质。例如,计算机可读存储介质包括,但不限于,易失性存储器,诸如随机存储器(RAM,DRAM,SRAM);以及非易失性存储器,诸如闪存、各种只读存储器(ROM,PROM,EPROM,EEPROM)、磁性和铁磁/铁电存储器(MRAM,FeRAM);以及磁性和光学存储设备(硬盘、磁带、CD、DVD);或其它现在已知的介质或今后开发的能够存储供计算机系统使用的计算机可读信息/数据。
在此,根据本申请的一个实施例包括一个装置,该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该装置运行基于前述根据本申请的多个实施例的方法和/或技术方案。
对于本领域技术人员而言,显然本申请不限于上述示范性实施例的细节,而且在不背离本申请的精神或基本特征的情况下,能够以其他的具体形式实现本申请。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本申请的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。

Claims (15)

1.一种在视频通话过程中传递信息的方法,应用于第一终端,其中,所述方法包括:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配;
通过所述长连接将所述触控序列信息发送至所述第二终端。
2.根据权利要求1所述的方法,其中,所述通过所述长连接将所述触控序列信息发送至所述第二终端,包括:
利用心跳检测规则获取新生成的所述触控序列信息;并通过所述长连接将新生成的所述触控序列信息发送至所述第二终端。
3.根据权利要求1所述的方法,其中,所述建立所述第一终端与所述第二用户使用的第二终端间的长连接,包括:
向所述第一终端对应的服务器发送建立所述第一终端与所述第二用户使用的第二终端间长连接的指令信息,以使得所述服务器根据所述指令信息绑定第一长连接和第二长连接以建立所述第一终端与所述第二终端间的长连接,其中,所述第一长连接为所述服务器与所述第一终端之间的长连接,所述第二长连接为所述服务器与所述第二终端之间的长连接。
4.根据权利要求3所述的方法,其中,所述方法还包括:
建立所述第一终端与所述服务器间的第一长连接;
其中,所述向所述第一终端对应的服务器发送建立所述第一终端与所述第二用户使用的第二终端间长连接的指令信息,包括:
通过所述第一长连接向所述服务器发送关于所述第二长连接的建立并绑定指令,其中,所述服务器根据所述建立并绑定指令建立所述第二终端与所述服务器间的所述第二长连接,并将所述第一长连接与所述第二长连接相绑定,以建立所述第一终端与所述第二终端间的长连接。
5.根据权利要求1至4中任一项所述的方法,其中,所述触控序列信息包括以下至少一项:
预定字符串中的路径信息;
预定字符串中的触控属性信息。
6.根据权利要求1至5中任一项所述的方法,其中,所述方法还包括:
获取所述第一用户在所述视频通话过程中的语音信息;
所述响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配,包括:
响应于检测到所述第一用户在所述第一终端的视频通话界面上的触控操作,生成所述触控操作对应的第二触控轨迹;
根据所述语音信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹;
在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,并基于所述第一触控轨迹实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配。
7.根据权利要求6所述的方法,其中,所述根据所述语音信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:
提取所述语音信息中的关键词信息;
根据所述关键词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹。
8.根据权利要求7所述的方法,其中,所述根据所述关键词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:
检测所述关键词信息中的预定名词信息;
根据所述预定名词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,其中,所述预定名词信息与第一触控轨迹相匹配。
9.根据权利要求8所述的方法,其中,所述根据所述预定名词信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹,包括:
根据所述预定名词信息确定对应的轨迹信息;
通过所述轨迹信息矫正所述第二触控轨迹以生成所述触控操作对应的第一触控轨迹。
10.根据权利要求1至9中任一项所述的方法,其中,所述方法还包括:
若在预定时间阈值内未检测到所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上隐藏所述第一触控轨迹。
11.一种在视频通话过程中传递信息的方法,应用于第二终端,其中,所述方法包括:
在使用所述第二终端的第二用户与使用第一终端的第一用户的视频通话过程中,基于所述第二终端与所述第一终端间的长连接,接收所述第一终端发送的触控序列信息;
基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
12.根据权利要求11所述的方法,其中,所述方法还包括:
通过所述长连接获取所述第一终端新生成的触控序列信息;
通过所述长连接从所述第一终端中实时获取触控状态信息;
若所述触控状态信息为消息增强模式,根据所述新生成的触控序列信息呈现对应的新生成的第一触控轨迹,所述新生成的触控序列信息与所述新生成的第一触控轨迹相匹配。
13.一种在视频通话过程中传递信息的方法,其中,该方法包括:
响应于检测到第一用户在与第二用户的视频通话过程中的消息触发操作,所述第一终端建立所述第一终端与所述第二用户使用的第二终端间的长连接;
响应于所述第一用户在所述第一终端的视频通话界面上的触控操作,在所述第一终端的视频通话界面上实时显示所述触控操作对应的第一触控轨迹,所述第一终端实时生成所述触控操作对应的触控序列信息,所述触控序列信息与所述第一触控轨迹相匹配,并通过所述长连接将所述触控序列信息发送至所述第二终端。
所述第二终端接收所述第一终端发送的触控序列信息,并基于所述触控序列信息,在视频通话界面上实时显示所述触控序列信息对应的第一触控轨迹。
14.一种在视频通话过程中传递信息的设备,其特征在于,所述设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行如权利要求1至12中任一项所述的方法。
15.一种存储指令的计算机可读介质,所述指令在被执行时使得系统进行如权利要求1至12中任一项所述方法的操作。
CN201910798097.8A 2019-08-27 2019-08-27 一种在视频通话过程中传递信息的方法与设备 Pending CN110536094A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910798097.8A CN110536094A (zh) 2019-08-27 2019-08-27 一种在视频通话过程中传递信息的方法与设备
PCT/CN2020/102254 WO2021036561A1 (zh) 2019-08-27 2020-07-16 一种在视频通话过程中传递信息的方法与设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910798097.8A CN110536094A (zh) 2019-08-27 2019-08-27 一种在视频通话过程中传递信息的方法与设备

Publications (1)

Publication Number Publication Date
CN110536094A true CN110536094A (zh) 2019-12-03

Family

ID=68664541

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910798097.8A Pending CN110536094A (zh) 2019-08-27 2019-08-27 一种在视频通话过程中传递信息的方法与设备

Country Status (2)

Country Link
CN (1) CN110536094A (zh)
WO (1) WO2021036561A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021036561A1 (zh) * 2019-08-27 2021-03-04 上海盛付通电子支付服务有限公司 一种在视频通话过程中传递信息的方法与设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101959050A (zh) * 2010-09-01 2011-01-26 宇龙计算机通信科技(深圳)有限公司 一种视频通话中传递信息的方法、系统及移动终端
CN103269346A (zh) * 2013-06-04 2013-08-28 温才燚 一种用于教学的远程交互系统
CN103529934A (zh) * 2012-06-29 2014-01-22 三星电子株式会社 用于处理多个输入的方法和装置
CN104754279A (zh) * 2013-12-30 2015-07-01 阿里巴巴集团控股有限公司 一种实现视频通话的方法及系统
US20160211005A1 (en) * 2008-09-12 2016-07-21 At&T Intellectual Property I, L.P. Providing sketch annotations with multimedia programs
CN108966031A (zh) * 2017-05-18 2018-12-07 腾讯科技(深圳)有限公司 视频会话中实现播放内容控制的方法及装置、电子设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106713968B (zh) * 2016-12-27 2020-04-24 北京奇虎科技有限公司 一种直播数据显示方法和装置
CN107484033A (zh) * 2017-09-15 2017-12-15 维沃移动通信有限公司 一种视频通话方法及移动终端
CN107835464B (zh) * 2017-09-28 2020-10-16 努比亚技术有限公司 视频通话窗口画面处理方法、终端和计算机可读存储介质
CN108156502A (zh) * 2018-01-05 2018-06-12 创盛视联数码科技(北京)有限公司 一种提高画笔和文字视频直播同步性的方法
CN110536094A (zh) * 2019-08-27 2019-12-03 上海盛付通电子支付服务有限公司 一种在视频通话过程中传递信息的方法与设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160211005A1 (en) * 2008-09-12 2016-07-21 At&T Intellectual Property I, L.P. Providing sketch annotations with multimedia programs
CN101959050A (zh) * 2010-09-01 2011-01-26 宇龙计算机通信科技(深圳)有限公司 一种视频通话中传递信息的方法、系统及移动终端
CN103529934A (zh) * 2012-06-29 2014-01-22 三星电子株式会社 用于处理多个输入的方法和装置
CN103269346A (zh) * 2013-06-04 2013-08-28 温才燚 一种用于教学的远程交互系统
CN104754279A (zh) * 2013-12-30 2015-07-01 阿里巴巴集团控股有限公司 一种实现视频通话的方法及系统
CN108966031A (zh) * 2017-05-18 2018-12-07 腾讯科技(深圳)有限公司 视频会话中实现播放内容控制的方法及装置、电子设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021036561A1 (zh) * 2019-08-27 2021-03-04 上海盛付通电子支付服务有限公司 一种在视频通话过程中传递信息的方法与设备

Also Published As

Publication number Publication date
WO2021036561A1 (zh) 2021-03-04

Similar Documents

Publication Publication Date Title
CN110336735A (zh) 一种用于发送提醒消息的方法与设备
CN108491131A (zh) 智能交互平板的操作方法、装置以及智能交互平板
CN105378624A (zh) 在交互出现于白板上时显示交互
CN103902056B (zh) 虚拟键盘输入方法、设备及系统
CN106133826A (zh) 用于语言模型自定义的灵活模式
CN109669657A (zh) 一种用于进行远程文档协作的方法与设备
CN110417641A (zh) 一种发送会话消息的方法与设备
CN110765395B (zh) 一种用于提供小说信息的方法与设备
CN110502298A (zh) 一种用于提供电子书的更新提醒信息的方法与设备
TW202034665A (zh) 修改區塊鏈網路配置的方法及系統
CN110174980A (zh) 一种在会话窗口呈现信息的方法与设备
CN109446832A (zh) 一种截屏方法及装置
CN110266505A (zh) 一种管理会话群的方法与设备
CN110336733A (zh) 一种呈现表情包的方法与设备
CN110413179A (zh) 一种呈现会话消息的方法与设备
CN110502873A (zh) 一种管理小说章节的阅读权限的方法与设备
CN109308175A (zh) 利用移动设备及显示设备进行同屏显示的电子装置及方法
CN110309428A (zh) 一种推荐社交对象的方法与设备
CN110519250A (zh) 一种提供信息流的方法与设备
CN208985138U (zh) 同屏显示的电子装置、计算机设备以及数据处理系统
CN110290557A (zh) 一种加载应用内页面标签的方法与设备
CN109978708A (zh) 控制社交分享信息在社交空间的呈现状态的方法与设备
CN110430253A (zh) 一种提供小说更新通知信息的方法与设备
CN109324741A (zh) 一种操作控制方法、装置和系统
CN109254781A (zh) 一种用于在用户设备上安装应用的方法与设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191203