CN114071425B - 电子设备间的协同方法、协同系统和电子设备 - Google Patents
电子设备间的协同方法、协同系统和电子设备 Download PDFInfo
- Publication number
- CN114071425B CN114071425B CN202010744234.2A CN202010744234A CN114071425B CN 114071425 B CN114071425 B CN 114071425B CN 202010744234 A CN202010744234 A CN 202010744234A CN 114071425 B CN114071425 B CN 114071425B
- Authority
- CN
- China
- Prior art keywords
- interface
- electronic device
- information
- collaboration
- electronic equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 143
- 238000004891 communication Methods 0.000 claims abstract description 69
- 238000012790 confirmation Methods 0.000 claims description 27
- 230000004044 response Effects 0.000 claims description 25
- 238000012545 processing Methods 0.000 claims description 23
- 230000005540 biological transmission Effects 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 5
- 238000009877 rendering Methods 0.000 claims description 5
- 230000006870 function Effects 0.000 description 22
- 230000008569 process Effects 0.000 description 19
- 238000010586 diagram Methods 0.000 description 16
- 238000013528 artificial neural network Methods 0.000 description 4
- 210000004027 cell Anatomy 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000012015 optical character recognition Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/70—Services for machine-to-machine communication [M2M] or machine type communication [MTC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
- H04N21/4821—End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W76/00—Connection management
- H04W76/10—Connection setup
- H04W76/14—Direct-mode setup
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W84/00—Network topologies
- H04W84/02—Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
- H04W84/10—Small scale networks; Flat hierarchical networks
- H04W84/12—WLAN [Wireless Local Area Networks]
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Information Transfer Between Computers (AREA)
- Telephone Function (AREA)
Abstract
本申请公开了一种电子设备间的协同方法,应用于至少包括第一电子设备和第二电子设备的系统,其中,第一电子设备和第二电子设备建立通信连接,该方法包括:第一电子设备显示目标界面,目标界面为用于第一电子设备的用户进行信息输入的界面;第一电子设备将与目标界面对应的界面视图数据发送至第二电子设备,以使第二电子设备根据界面视图数据,生成并显示与目标界面对应的协同界面;第二电子设备通过接收第二电子设备的用户对协同界面的信息输入操作可以得到输入信息,并将输入信息发送至第一电子设备,即可实现第二电子设备对第一电子设备的信息输入的协同,以提高用户的体验感。本申请还公开了一种协同系统和电子设备。
Description
技术领域
本申请涉及通信技术领域,特别涉及一种电子设备间的协同方法、协同系统和电子设备。
背景技术
随着电视、智慧屏等电子设备的普及,电子设备的应用场景越来越多。在用户与电子设备进行交互的一些场景中,由用户直接对电子设备进行信息输入操作的方式不能很好地满足用户的使用需求。例如,在当前的在线教育场景中,电视(或智慧屏)播放在线视频课程(也可以称为网课视频),用户通过电视进行在线视频课程学习。在学习过程中,通常会存在老师出了一道题,需要用户进行在线答题的场景,当前用户是使用电视的遥控器对电视上显示的答题卡进行答题输入操作。但是通过遥控器对答题卡进行答案输入操作的方式,一方面局限于文字输入和选择项选择两种方式,使得用户不能进行更多信息的输入,另一方面通过遥控器进行文字输入的操作非常繁琐,影响用户的体验。
发明内容
本申请提供了一种电子设备间的协同方法、协同系统和电子设备,在电子设备的使用过程中,可以通过另一电子设备对该电子设备的信息输入进行协同,以实现便捷、快速地该电子设备的信息输入,提高用户的体验感。
为解决上述技术问题,第一方面,本申请的实施方式提供了一种电子设备间的协同方法,应用于至少包括第一电子设备和第二电子设备的系统,其中,第一电子设备和第二电子设备建立通信连接,该方法包括:第一电子设备显示目标界面,目标界面为用于第一电子设备的用户进行信息输入的界面;第一电子设备将与目标界面对应的界面视图数据发送至第二电子设备;第二电子设备接收界面视图数据,根据界面视图数据生成并显示与目标界面对应的协同界面。协同界面包括的文字、图形等界面元素与目标界面包括的文字、图形等界面元素分别相同,且协同界面上各元素的布局与目标界面上各元素的布局相同。协同界面用于第二电子设备的用户在第二电子设备上进行信息输入,输入的信息即为目标界面上需要第一电子设备的用户输入的信息。第二电子设备接收第二电子设备的用户对协同界面的信息输入操作得到输入信息,且第二电子设备将输入信息发送至第一电子设备。即第一电子设备通过第二电子设备对该第一电子设备的信息输入进行协同,以实现便捷、快速地该第一电子设备的信息输入,提高用户的体验感。
第一电子设备的用户和第二电子设备的用户可以是同一个用户,也可以是不同的用户。
第一电子设备可以是电视,第二电子设备可以是手机,本申请提供的电子设备间的协同方法可以应用于用户通过电视观看在线课程视频的场景中,用户通过手机对电视上显示的答题卡进行在线答题的场景。
在上述第一方面的一种可能的实现中,该方法还包括:第一电子设备运行应用,显示应用业务界面;目标界面为应用业务界面的部分界面。即该目标界面为应用业务界面的一部分界面,例如该应用可以是在线视频课程播放场景中的在线视频课程应用,应用业务界面即为在线视频课程应用播放在线视频课程的视频播放界面,目标界面可以是视频播放界面上的答题卡,或者也可以是其他视频播放界面上用于用户输入信息的界面。
在上述第一方面的一种可能的实现中,该方法还包括:第一电子设备从管理设备获取应用对应的应用业务数据以用于应用业务界面的显示,以及获取目标界面对应的界面视图数据,用于第一电子设备在显示目标界面时,第一电子设备直接将该目标界面的界面视图数据发送给第二电子设备,以使第二电子设备根据界面视图数据构建目标界面对应的协同界面。应用业务数据例如可以是前述的在线视频课程的视频流媒体数据,界面视图数据可以是前述的答题卡的数据。
另外,管理设备可以是服务器,也可以是电脑、平板等其他电子设备。
在上述第一方面的一种可能的实现中,该方法还包括:第一电子设备从管理设备获取应用对应的应用业务数据以用于应用业务界面的显示,并且第一电子设备对应用业务数据进行数据解析,从应用业务数据中获取目标界面对应的界面视图数据。例如应用业务数据例如可以是前述的在线视频课程的视频流媒体数据,则可以通过图像解析方式从视频流媒体数据中解析出答题卡的界面元素以及界面布局等信息。
在上述第一方面的一种可能的实现中,应用为视频播放应用,该方法还包括:第一电子设备显示目标界面时,第一电子设备停止播放视频;第一电子设备接收到输入信息之后,第一电子设备播放视频。即可以在用户进行信息输入的时候,暂停播放视频,以免用户漏看视频相关内容,或者影响用户的信息输入。
在上述第一方面的一种可能的实现中,视频播放应用可以是前述的在线视频课程应用,另外,应用还可以是视频会议应用,或者其他的视频应用等。
在上述第一方面的一种可能的实现中,信息输入操作包括以下任意一种:文字输入操作;对选择项的选择操作;文件添加操作;语音输入操作。其中文字输入操作可以是通过输入键盘进行文字输入,也可以是通过手写等方式进行文字输入。对选择项的选择操作可以是点击操作,也可以是勾画(例如划线)、圈选等操作。文件添加操作可以是添加图片文件、Word文件、音频文件等文件。语音输入操作可以是第二电子设备的用户通过第二电子设备的录音部件进行语音输入。
在上述第一方面的一种可能的实现中,该方法还包括:第二电子设备检测到第二电子设备的用户对协同界面的触发操作,生成并显示信息输入控件;第二电子设备接收第二电子设备的用户通过信息输入控件对协同界面的信息输入操作。该信息输入控件可以是对应于前述的文字输入操作的输入键盘,也可以是对应于前述的用于勾画、圈选等操作的涂鸦笔工具,也可以是对应于前述的语音输入操作的语音输入控件。当然,其还可以是其他类型的用于用户进行信息输入的控件。
在上述第一方面的一种可能的实现中,第二电子设备将输入信息发送至第一电子设备之后,还包括:第二电子设备更新协同界面,显示第二界面。该第二界面可以显示第二电子设备的用户已输入信息的提示信息,以提醒第二电子设备的用户已完成信息输入。也可以显示下一个用于第二电子设备的用户进行信息输入的界面等。
在上述第一方面的一种可能的实现中,第一电子设备接收到输入信息之后,该方法还包括,第一电子设备执行以下至少一项操作:第一电子设备显示已接收到输入信息的第一提示信息,用于提醒第一电子设备的用户第一电子设备已接收到输入信息。第一电子设备显示输入信息以用于第一电子设备的用户可以在第一电子设备上查看该输入信息。第一电子设备将输入信息发送至管理设备,且第一电子设备显示已将输入信息发送至管理设备的第二提示信息,以用于提醒第一电子设备的用户已将输入信息发送至管理设备。第一电子设备将第二电子设备的标识信息发送至管理设备,以用于管理设备知晓该输入信息的输入设备。第二电子设备的标识信息可以是第二电子设备的产品编号等设备信息,也可以是第二电子设备的用户账号等用户信息,或者可以是第二电子设备所在网络的网络信息等。
在上述第一方面的一种可能的实现中,该方法还包括:第一电子设备向第二电子设备发送协同请求,协同请求用于请求第二电子设备进行信息输入协同;第二电子设备接收协同请求,生成并发送同意协同的应答信息给第一电子设备;第一电子设备接收应答信息,根据应答信息将界面视图数据发送至第二电子设备。即第一电子设备和第二电子设备根据协同请求完成协同协商后,第一电子设备将界面视图数据发送至第二电子设备。
在上述第一方面的一种可能的实现中,第一电子设备向第二电子设备发送协同请求,可以是在第一电子设备显示目标界面之后,第一电子设备直接向第二电子设备发送协同请求。
在上述第一方面的一种可能的实现中,第二电子设备可以直接根据该协同请求生成应答信息。
在上述第一方面的一种可能的实现中,该方法还包括:第一电子设备显示目标界面之后,第一电子设备显示协同开启控件;第一电子设备检测到第一电子设备的用户对协同开启控件的确认开启触发操作,向第二电子设备发送协同请求。即第一电子设备在接收到用户对协同开启控件的确认开启触发操作之后,向第二电子设备发送协同请求。
在上述第一方面的一种可能的实现中,该方法还包括:第二电子设备接收协同请求,生成并显示协同确认控件;第二电子设备检测到第二电子设备的用户对协同确认控件的确认触发操作,生成应答信息。
在上述第一方面的一种可能的实现中,协同请求包括第一电子设备的标识信息;第二电子设备根据标识信息对第一电子设备进行鉴权,若鉴权通过,第二电子设备生成应答信息。第一电子设备的标识信息可以是第一电子设备的产品编号等设备信息,也可以是第一电子设备的用户账号等用户信息,或者可以是第一电子设备所在网络的网络信息等。
在上述第一方面的一种可能的实现中,该方法还包括:第二电子设备接收确认发送指令,将输入信息发送至第一电子设备。
在上述第一方面的一种可能的实现中,第二电子设备得到输入信息之后,显示发送选择控件;第二电子设备通过第二电子设备的用户对发送选择控件的确认发送触发操作接收确认发送指令。
在上述第一方面的一种可能的实现中,该方法还包括:第一电子设备和第二电子设备通过各自的分布式通信模块进行二者之间的如前述的界面视图数据等信息传输。
第二方面,本申请的实施方式提供了一种电子设备间的协同方法,应用于第一电子设备,第一电子设备和第二电子设备建立通信连接,该方法包括:第一电子设备显示目标界面,目标界面为用于第一电子设备的用户进行信息输入的界面;第一电子设备将与目标界面对应的界面视图数据发送至第二电子设备,以使第二电子设备根据界面视图数据生成并显示与目标界面对应的协同界面,且使得第二电子设备接收第二电子设备的用户对协同界面的信息输入操作得到输入信息;第一电子设备接收第二电子设备发送的输入信息。
在上述第二方面的一种可能的实现中,该方法还包括:第一电子设备运行应用,显示应用业务界面;目标界面为应用业务界面的部分界面。
在上述第二方面的一种可能的实现中,该方法还包括:第一电子设备从管理设备获取应用对应的应用业务数据以用于应用业务界面的显示,以及获取目标界面对应的界面视图数据。
在上述第二方面的一种可能的实现中,应用为视频播放应用,该方法还包括:第一电子设备显示目标界面时,第一电子设备停止播放视频;第一电子设备接收到输入信息之后,第一电子设备播放视频。
在上述第二方面的一种可能的实现中,信息输入操作包括以下任意一种:文字输入操作;对选择项的选择操作;文件添加操作;语音输入操作。
在上述第二方面的一种可能的实现中,第一电子设备接收到输入信息之后,该方法还包括,第一电子设备执行以下至少一项操作:第一电子设备显示已接收到输入信息的第一提示信息;第一电子设备显示输入信息以用于用户可以在第一电子设备上显示该输入信息;第一电子设备将输入信息发送至管理设备,且第一电子设备显示已将输入信息发送至管理设备的第二提示信息;第一电子设备将第二电子设备的标识信息发送至管理设备。
在上述第二方面的一种可能的实现中,该方法还包括:第一电子设备向第二电子设备发送协同请求,协同请求用于请求第二电子设备进行信息输入协同;第一电子设备接收第二电子设备发送的根据协同请求生成的应答信息,根据应答信息将界面视图数据发送至第二电子设备。
在上述第二方面的一种可能的实现中,协同请求包括第一电子设备的标识信息。
在上述第二方面的一种可能的实现中,该方法还包括:第一电子设备显示目标界面之后,第一电子设备显示协同开启控件;第一电子设备检测到用户对协同开启控件的确认开启触发操作,向第二电子设备发送协同请求。
本实施方式提供的电子设备间的协同方法,为与上述第一方面和/或第一方面的任意一种可能的实现方式所提供的电子设备间的协同方法对应的第一电子设备执行的电子设备间的协同方法,因此也能实现第一方面提供的电子设备间的协同方法所具备的有益效果(或优点)。
第三方面,本申请的实施方式提供了一种电子设备间的协同方法,应用于第二电子设备,第二电子设备和第一电子设备建立通信连接,该方法包括:第二电子设备接收第一电子设备发送的界面视图数据,界面视图数据为第一电子设备显示的目标界面对应的界面视图数据,目标界面为用于第一电子设备的用户进行信息输入的界面;第二电子设备根据界面视图数据生成并显示与目标界面对应的协同界面;第二电子设备接收第二电子设备的用户对协同界面的信息输入操作得到输入信息;第二电子设备将输入信息发送至第一电子设备。
在上述第三方面的一种可能的实现中,信息输入操作包括以下任意一种:文字输入操作;对选择项的选择操作;文件添加操作;语音输入操作。
在上述第三方面的一种可能的实现中,该方法还包括:第二电子设备检测到用户对协同界面的触发操作,生成并显示信息输入控件;第二电子设备接收用户通过信息输入控件对协同界面的信息输入操作。
在上述第三方面的一种可能的实现中,该方法还包括:第二电子设备接收第一电子设备发送的协同请求,根据协同请求生成并发送协同应答至第一电子设备。
在上述第三方面的一种可能的实现中,第二电子设备根据协同请求中包括的标识信息对第一电子设备进行鉴权,若鉴权通过,第二电子设备生成应答信息。
在上述第三方面的一种可能的实现中,该方法还包括:第二电子设备接收第一电子设备的协同请求,生成并显示协同确认控件;第二电子设备检测到用户对协同确认控件的确认触发操作,生成应答信息。
在上述第三方面的一种可能的实现中,该方法还包括:第二电子设备接收第二电子设备的用户的确认发送指令,将输入信息发送至第一电子设备。
在上述第三方面的一种可能的实现中,第二电子设备得到输入信息之后,显示发送选择控件;第二电子设备通过第二电子设备的用户对发送选择控件的确认发送触发操作接收确认发送指令。
本实施方式提供的电子设备间的协同方法,为与上述第一方面和/或第一方面的任意一种可能的实现方式所提供的电子设备间的协同方法对应的第二电子设备执行的电子设备间的协同方法,因此也能实现第一方面提供的电子设备间的协同方法所具备的有益效果(或优点)。
第四方面,本申请的实施方式提供了一种协同系统,该协同系统至少包括第一电子设备和第二电子设备,第一电子设备和第二电子设备建立通信连接,其中:第一电子设备用于显示目标界面;目标界面为用于第一电子设备的用户进行信息输入操作的界面;第一电子设备用于将与目标界面对应的界面视图数据发送至第二电子设备;第二电子设备用于接收界面视图数据,根据界面视图数据生成并显示与目标界面对应的协同界面;第二电子设备用于接收第二电子设备的用户对协同界面的信息输入操作得到输入信息;第二电子设备用于将输入信息发送至第一电子设备。
本申请提供的协同系统,用于执行上述第一方面和/或第一方面的任意一种可能的实现方式所提供的电子设备间的协同方法,因此也能实现第一方面提供的电子设备间的协同方法所具备的有益效果(或优点)。
第五方面,本申请的实施方式提供了一种电子设备,包括:存储器,用于存储计算机程序,计算机程序包括程序指令;控制部件,用于执行程序指令,以使电子设备执行如上述第一方面和/或第一方面的任意一种可能的实现方式所提供的电子设备间的协同方法;或者如上述第二方面和/或第二方面的任意一种可能的实现方式所提供的电子设备间的协同方法;或者如上述第三方面和/或第三方面的任意一种可能的实现方式所提供的电子设备间的协同方法。
第六方面,本申请的实施方式提供了一种计算机可读取存储介质,其特征在于,计算机可读取存储介质存储有计算机程序,计算机程序包括程序指令,程序指令被计算机运行以使计算机执行如上述第一方面和/或第一方面的任意一种可能的实现方式所提供的电子设备间的协同方法;或者如上述第二方面和/或第二方面的任意一种可能的实现方式所提供的电子设备间的协同方法;或者如上述第三方面和/或第三方面的任意一种可能的实现方式所提供的电子设备间的协同方法。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施方式描述中所使用的附图作简单介绍。
图1是根据本申请的一些实施方式,示出了本申请提供的电子设备间的协同方法的一种应用场景的系统示意图;
图2A是根据本申请的一些实施方式,示出了一种手机的结构示意图;
图2B是根据本申请的一些实施方式,示出了一种电视的结构示意图;
图2C是根据本申请的一些实施方式,示出了一种手机和电视的软件框架结构,以及手机、电视、服务器之间的信息流示意图;
图3A-3I是根据本申请的一些实施方式,示出了一些手机和电视的界面示意图;
图4A-4C是根据本申请的一些实施方式,示出了另一些手机和电视的界面示意图;
图5是根据本申请的一些实施方式,示出了另一种手机和电视的界面示意图;
图6是根据本申请的一些实施方式,示出了本申请提供的电子设备间的协同方法的另一种应用场景的系统示意图;
图7是根据本申请的一些实施方式,示出了本申请提供的电子设备间的协同方法的另一种应用场景的手机和电视的界面示意图;
图8是根据本申请的一些实施例,示出了一种电子设备的结构示意图;
图9是根据本申请的一些实施例,示出了一种片上系统(SoC)的结构示意图。
具体实施方式
下面将结合附图对本申请实施例的实施方式进行详细描述。
在电子设备的使用过程中,存在用户直接对电子设备进行信息输入的方式,不能很好地满足用户的使用需求的问题。本申请提供一种电子设备间的协同方法,在第一电子设备的使用过程中,可以通过第二电子设备对该第一电子设备的信息输入进行协同,以实现对第一电子设备的便捷、快速地信息输入,提高用户的体验感。
第一电子设备典型地可以是电视、智慧屏等大屏设备,另外,第一电子设备也可以是其他如空调、冰箱等设备。
第二电子设备典型地可以是手机、平板电脑、笔记本电脑、个人计算机(PersonalComputer,PC)、超级移动个人计算机(Ultra-mobile Personal Computer,UMPC)、手持计算机、上网本、个人数字助理(Personal Digital Assistant,PDA)等设备。
为了说明本申请提供的电子设备间的协同方法,本申请提供了如图1所示的作为本申请提供的电子设备间的协同方法的载体的协同系统。
请参见图1,该协同系统包括手机100、电视200和服务器300,其中,电视200和手机100可以通过路由器(图中未示出)建立无线局域网(wireless local area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络)通信连接。电视200与服务器300可以通过路由器建立通信连接,电视200可以访问服务器300,从服务器300获取电视200需要的例如视频的流媒体数据等视频数据。
本申请中,服务器300可以是云服务器。另外,服务器300也可以是其他如PC等设备。
上面所述的电视200和手机100之间建立通信连接的方式,也可以是通过蓝牙(bluetooth,BT)等方式建立通信连接。
本申请提供的电子设备间的协同方法中,以观看在线视频课程的场景为例,电视200和手机100建立通信连接后,电视200和手机100之间可以进行信息输入的协同。例如,在电视200播放在线视频课程的过程中,需要用户进行在线答题互动,则电视200在视频播放界面上显示在线视频课程相关的答题卡,用户可以在答题卡上进行信息输入。答题卡的界面即作为目标界面的实例,为可用于用户进行信息输入的界面。电视200在视频播放界面上显示目标界面后,电视200将与目标界面对应的界面视图数据发送给手机100。手机100接收界面视图数据,根据界面视图数据生成与目标界面对应的协同界面,并且手机100显示该协同界面。协同界面为与答题卡对应的协同答题卡,协同答题卡包括的各界面元素(例如文字、图片等)与答题卡包括的各界面元素相同、以及协同答题卡上各界面元素的布局与答题卡上各界面元素的布局相同,且协同答题卡的比例相比于答题卡更小,以适配于手机100的屏幕,用户可以在协同答题卡上进行信息输入操作。手机100接收用户对协同答题卡的信息输入操作得到输入信息,然后手机100将输入信息发送至电视200,以实现手机100对电视200的信息输入的协同,以实现对电视200的便捷、快速地信息输入,提高用户的体验感。
需要说明的是,本申请的应用场景不限于如图1所示的系统及场景,也可以是除了手机100以外的其他设备与电视200或其他的电子设备运用根据本申请的协同方法进行信息输入的协同处理。目标界面可以是用户观看在线视频课程场景中,电视200显示的答题卡,也可以是用户观看其他视频的场景中,电视200显示的用于用户进行信息输入的信息输入界面。
请参见图2A,图2A示出了在本申请的一种实现方式中,手机100的结构示意图。
手机100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对手机100的限定。在本申请实施例另一些实施例中,手机100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
处理器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
手机100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
移动通信模块150可以提供应用在手机100上的包括2G/3G/4G/5G等无线通信功能。
无线通信模块160可以提供应用在手机100上的包括WLAN(Wi-Fi),BT等无线通信的解决方案。
在一些实施例中,手机100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得手机100可以通过无线通信技术与网络以及其他设备通信。
手机100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。在一些实施例中,手机100可以包括1个或N个显示屏194,N为大于1的正整数。
手机100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能,以及实现视频通话功能。在一些实施例中,手机100可以包括1个或N个摄像头193,N为大于1的正整数。
视频编解码器用于对数字视频压缩或解压缩。手机100可以支持一种或多种视频编解码器。这样,手机100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等,另外,手机100可以实现音视频数据和视频数据的封装和播放等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现手机100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储手机100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行手机100的各种功能应用以及数据处理。
例如,内部存储器121存储指令可以使得手机100执行以下步骤,手机100接收到前述答题卡对应的界面视图数据后,根据界面视图数据生成与答题卡对应的协同答题卡作为协同界面,并且手机100通过显示屏194显示该协同答题卡。另外,手机100接收用户在协同答题卡上输入的答案,通过无线通信模块160将输入答案发送至电视200,以实现手机100对电视200的答案输入的协同。
手机100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如视频播放、音乐播放等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。当有触摸操作作用于显示屏194,手机100根据压力传感器180A检测所述触摸操作强度。手机100也可以根据压力传感器180A的检测信号计算触摸的位置。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器180K可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于手机100的表面,与显示屏194所处的位置不同。
本申请实施例中,手机100可以根据压力传感器180A、触摸传感器180K检测用户的在显示屏194上的触发操作,本实施例对此不做限定。
请参见图2B,图2B示出了在本申请的一种实现方式中,电视200的结构示意图。
电视200可以包括处理器210,通信模块220、音频模块230、显示屏240、电源模块250和内部存储器260。
其中,处理器210可以包括一个或多个处理单元,例如:处理器210可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。处理器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器210中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器210中的存储器为高速缓冲存储器。该存储器可以保存处理器210刚用过或循环使用的指令或数据。如果处理器210需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器210的等待时间,因而提高了系统的效率。
通信模块220可以提供应用在电视200上的包括WLAN(Wi-Fi),BT等无线通信的解决方案。
手机100通过GPU,显示屏240,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏240和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器210可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
电视200可以通过音频模块230以及应用处理器等实现音频功能。例如视频播放、音乐播放等。
电视200可以通过电源模块250实现自身供电。
内部存储器260可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器260可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电视200使用过程中所创建的数据(比如视频数据)等。此外,内部存储器260可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器260通过运行存储在内部存储器260的指令,和/或存储在设置于处理器中的存储器的指令,执行电视200的各种功能应用以及数据处理。
例如,内部存储器121存储指令可以使得电视200执行以下步骤,电视200在电视200的视频播放界面上包括目标界面时,通过通信模块220发送目标界面的界面视图数据至手机100,且电视200通过通信模块220接收手机100发送的输入信息,以获取输入信息。
可以理解的是,本发明实施例示意的结构并不构成电视200的限定。在本申请实施例另一些实施例中,电视200可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。
请参见图2C,图2C示出了在本申请的一种实现方式中,手机100和电视200的软件结构框图。
需要说明的是,本申请中,手机100和电视200的系统可以是Android系统,也可以是其他类型的系统。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,手机100和电视200的系统可以包括应用程序层和系统层,其中应用程序层可以包括一系列应用程序包;系统层可以为应用程序层的应用程序提供应用编程接口(application programming interface,API)和编程框架,以及提供实现系统功能的其他模块。
手机100的应用程序层包括协同界面模块1100和第一分布式通信模块1200,电视200的应用程序层包括在线视频课程应用2100和第二分布式通信模块2200。在线视频课程应用2100也可以是其他视频播放应用。
需要说明的是,手机100和电视200通过分别设置分布式通信模块,具备了分布式通信能力,手机100和电视200可以基于该分布式通信能力进行二者之间的信息传输。
本申请的一种实现方式中,该电子设备间的协同方法可以应用于用户通过电视200观看在线视频课程的场景中。在电视200播放在线视频课程的过程中,如果老师出了一道题,需要用户进行在线回答,则电视200的在线视频课程的视频播放界面上显示答题卡用于用户输入答案,即答题卡作为用于用户进行信息输入的目标界面。为便于用户输入答案,电视200将与答题卡对应的答题卡的界面视图数据发送给手机100。手机100接收界面视图数据,根据界面视图数据生成与答题卡对应的协同答题卡作为协同界面,并且手机100显示该协同答题卡。协同答题卡与答题卡显示的内容相同,用户可以在协同答题卡上输入答案。手机100接收用户在协同答题卡上输入的答案,然后手机100将答案发送至电视200,以实现手机100对电视200的答案输入的协同。
请继续参见图2C,本申请的一种实现方式中,在用户通过电视200观看在线视频课程的场景中,用户通过手机100实现对电视200的答题输入的协同的过程,包括:
S101,电视200与服务器300建立通信连接,用户打开电视200中的在线视频课程应用2100观看在线视频课程,在线视频课程应用2100访问服务器300。服务器300将在线视频课程视频的流媒体数据和该在线视频课程中包含的所有答题卡的界面视图数据发送给在线视频课程应用2100。在线视频课程应用2100根据流媒体数据进行在线视频课程的播放。
其中流媒体数据即为在线视频课程的视频数据(或者也可以称为应用业务数据,用于手机100显示对应的在线视频课程的视频播放界面),流媒体数据可以包括讲课的老师的图像信息以及课件信息(例如PPT)等。界面视图数据包括答题卡上的文字信息、图片信息等各类元素的信息,以及各元素的布局信息等。
用户打开电视200中的在线视频课程应用2100可以是通过遥控器打开。
S102,在线视频课程应用2100根据流媒体数据进行在线视频课程的播放的过程中,进行在线视频课程的视频播放界面视图的呈现。视频播放界面视图在视频播放的过程中,对应不同的时间点有不同的内容。在线视频课程的场景中,例如老师在某一时刻出了一道题,需要用户进行在线答题。老师可以通过在线视频课程应用提供的功能,触发答题卡的显示。则电视200在在线视频课程视频播放界面上显示用于用户进行信息输入的答题卡。在线视频课程应用2100将答题卡的界面视图数据发送至电视200的第二分布式通信模块2200。答题卡的界面视图数据可以作为独立于前述的流媒体数据的数据包进行发送。
本实现方式中,电视200与手机100建立通信连接后,可以默认电视200与手机100开启了信息输入的协同处理功能。在电视200显示答题卡时,电视200需要手机100进行信息输入的协同处理,则电视200与手机100之间可以直接进行信息输入的协同处理,即电视200显示答题卡时,在线视频课程应用2100可以将答题卡的界面视图数据发送至电视200中的第二分布式通信模块2200,以及在步骤S102之后,电视200可以直接执行步骤S103。
另外,在线视频课程视频播放界面上显示答题卡后,在线视频课程应用2100可以暂时停止播放该在线视频课程。
S103,电视200中的第二分布式通信模块2200通过与手机100之间的分布式通信将答题卡的界面视图数据发送给手机100中的第一分布式通信模块1200。界面视图数据包括答题卡的文字信息、图片信息等各界面元素信息,以及各界面元素的布局信息,使得手机100可以根据该界面视图数据在手机100侧重新构建与答题卡对应的协同答题卡。协同答题卡包括的各界面元素(例如文字、图片等)与答题卡包括的各界面元素相同、以及协同答题卡上各界面元素的布局与答题卡上各界面元素的布局相同,且协同答题卡的比例相比于答题卡更小,以适配于手机100的屏幕,用户可以在协同答题卡上进行答题。
S104,手机100中的第一分布式通信模块1200将答题卡的界面视图数据发送给手机100中的协同界面模块1100。协同界面模块1100根据答题卡的界面视图数据进行视图渲染处理生成与答题卡对应的协同答题卡,并在手机100的屏幕上显示该协同答题卡。且协同界面模块1100接收用户对协同答题卡的信息输入操作,即进行答案输入操作,得到作为输入信息的答案。
协同界面模块1100在生成协同答题卡时,可以是根据界面视图数据中的答题卡的文字信息、图片信息等各类元素信息,以及各元素的布局信息进行视图渲染得到与答题卡相同的协同答题卡。协同界面模块1100在生成协同答题卡时,还可以根据手机100的屏幕大小对协同答题卡相对于答题卡的比例或者布局进行调整,以使手机100可以完全显示答题卡上的文字信息、图片信息等各类界面元素信息。例如协同界面模块1100可以将协同答题卡缩小至答题卡的十分之一,或者将在答题卡上在同一行显示的文字,调整为在协同答题卡上分为三行进行显示等,其可以根据需要进行调整。
如果答题卡是包括多个选择项的选择题类型的答题卡,则手机100可以接收用户对选择项的点击操作,手机100可以根据用户的点击操作的触发位置得到用户输入的答案,答案可以是例如“A”(或者B、C、D)等英文字母,或者“1”等数字。或者手机100可以接收用户对选择项的勾选操作,通过用户进行勾选操作的触发位置得到用户输入的答案,或者通过对协同答题卡的界面进行解析,通过图像识别方式得到用户输入的答案。另外,勾选操作还可以是勾画操作。
如果答题卡是包括输入框的简答题类型的答题卡,则手机100可以接收用户在输入框内的文字输入操作,手机100可以得到用户输入的文字答案。
手机100得到作为输入信息的答案后,以文本形式存储该答题。
S105,手机100中的协同界面模块1100将作为输入信息的答案发送给手机100中的第一分布式通信模块1200。
手机100中的协同界面模块1100在收到用户的确认发送指令后,将作为输入信息的答案发送给手机100中的第一分布式通信模块1200。
S106,手机100中的第一分布式通信模块1200将作为输入信息的答案发送给电视200中的第二分布式通信模块2200。
S107,电视200中的第二分布式通信模块2200将作为输入信息的答案发送给电视200中的在线视频课程应用2100。
在线视频课程应用2100接收到输入信息后,可以在电视200的屏幕上显示该作为输入信息的答案,例如显示“手机100的答案是“A””。
另外,在线视频课程应用2100接收到作为输入信息的答案后,还可以执行步骤S108。
S108,在线视频课程应用2100将作为输入信息的答案发送给服务器300。
服务器300得到作为输入信息的答案后,可以将该答案进行存储,以用于老师等相关人员的查看。
对于步骤S108,电视200中的在线视频课程应用2100可以只将用户输入的答案发送给服务器300。在本申请的另一些实现方式中,电视200中的在线视频课程应用2100也可以将答案和手机100的标识信息发送给服务器300,以使老师通过手机100的标识信息可以知道答题者是谁。手机100的标识信息例如可以是手机的国际移动设备识别码(International Mobile Equipment Identity,IMEI)等设备标识信息,或者手机100的用户账号等用户信息,例如可以是手机100的设备关联用户账号,也可以是在线视频课程的账户信息。
电视200可以根据答案的传输链路确定手机100的标识信息,另外,手机100也可以在给电视200发送答案时,将手机100的标识信息发送给电视200。
本实现方式中,手机100与电视200建立通信连接,可以是在手机100和电视200开机并开启设备发现功能后,手机100和电视200分别进行设备发现,以建立通信连接。另外手机100与电视200建立通信连接,也可以是在前述的步骤S102之后,电视200中的第二分布式通信模块2200接收到答题卡的界面视图数据后,电视200通过第二分布式通信模块2200向手机100发送连接请求,以建立通信连接。手机100中的第一分布式通信模块1200接收到连接请求后,若确定与电视200建立通信连接,则向电视200中的第二分布式通信模块2200发送同意建立通信应答。电视200接收到同意建立通信应答后,与手机100建立通信连接。
在本申请的另一种实现方式中,电视200与手机100建立通信连接后,若并未默认电视200与手机100开启信息输入的协同处理,在电视200显示答题卡时,电视200需要手机100进行信息输入的协同处理时,电视200与手机100之间需要协商确定是否进行信息输入操作的协同处理。
即对于步骤S103,电视200中的第二分布式通信模块2200通过与手机100之间的分布式通信将答题卡的界面视图数据发送给手机100中的第一分布式通信模块1200之前,还包括,电视200向手机100发送协同请求,协同请求用于请求手机100进行信息输入的协同处理,协调请求中包括电视200的标识信息。标识信息可以是电视200的设备标识信息,例如型号、产品序列号等信息,也可以是电视200所在网络的网络标识信息,或者可以是电视200的用户的账号信息等。
手机100接收协同请求,根据标识信息对电视200进行鉴权,若鉴权通过,则手机100确定进行协同,手机100向电视200发送同意进行协同的应答信息给电视200。电视200接收同意进行协同的应答信息后,根据该应答信息将答题卡的界面视图数据发送至手机100。若鉴权未通过,则手机100确定不同意进行协同,手机100向电视200发送不同意进行协同的应答信息给电视200。电视200接收不同意进行协同的应答信息后,不用将答题卡的界面视图数据发送至手机100。
示例性的,手机100根据电视200的标识信息对电视200进行鉴权可以是,手机100将电视200的设备标识信息与手机100存储的可信设备的可信设备标识信息进行比对,判断设备标识信息是否存在于可信设备标识信息列表中,以判断电视200是否为手机100的可信设备。若电视200的设备标识信息存在于可信设备标识信息列表中,则电视200是可信设备,鉴权通过。若电视200的设备标识信息不存在于可信设备标识信息列表中,则电视200不是手机100的可信设备,鉴权未通过。
手机100对电视200进行鉴权也可以是通过其他方式进行鉴权,其可以根据需要选择。
在本申请的另一实现方式中,手机100确认是否进行协同也可以是,手机100在接收到电视200发送的协同请求后,如果接收到用户确认进行协同的指令,则手机100确认进行协同;如果手机100接收到用户确认不进行协同的指令,则手机100确认不进行协同。手机100接收用户确认是否进行协同的指令,可以是通过用户对显示于手机100的屏幕上的协同确认控件的触发操作进行确认,也可以是通过接收的用户的语音输入等方式进行确认。
本实现方式提供的电子设备间的协同方法,在用户通过电视200观看在线视频课程需要进行在线答题的场景中,电视200可以将用于用户输入答案的答题卡发送至手机100进行显示,且用户可以在手机100上显示的与答题卡对应的协同答题卡上输入答案,然后手机100将用户输入的答案发送给电视200,以完成手机100对电视200的答案输入的协同处理。相比于现有技术中,用户通过遥控器对电视200进行答案输入的方式,用户通过手机100便可以实现答案输入,而不需要额外借助于遥控器。随着手机100的普及,用户可以直接通过手机100实现对电视200的信息输入以及控制等,而不需要再单独配置遥控器,更符合当前智慧电子设备的发展需求,以及符合设备间的更为便捷、快速的交互需求。
另外,如果答题卡上的题目是选择题类型,则答题卡包括多个选择项以及各选择项对应的答案,用户通过手机100可以对答案对应的选择项进行点击操作以输入答案,或者用户可以对答案对应的选择项进行划线或者圈选等操作以输入答案。相比于通过遥控器的方向键和确定键选择题目的答案的方式(其原理和通过遥控器选择电视节目类似),其操作更为便捷。
如果答题卡上的题目是填空题类型,则答题卡包括题目以及可以用于用户输入答案的答案输入区域(例如输入框),用户点击答案输入区域可以进行文字输入或者进行图片输入以输入答案。用户通过手机100进行文字等形式的答案输入的速度要比通过遥控器输入文字等形式的答案的速度更快,操作更便捷,可以有效地提高用户的体验。
答题卡还可以包括其他类型的题目,用户通过对手机100进行触发或触控操作可以实现各类输入信息的输入,可以为丰富在线视频课程的题目类型提供支持。
在本申请的另一实现方式中,对于S101,服务器300可以只将在线视频课程视频的流媒体数据发给电视200,对于S102,在线视频课程应用2100根据流媒体数据进行在线视频课程的播放的过程中,电视200可以对在线视频课程视频播放界面通过图像识别方法进行图像识别,确定是否存在答题卡,若存在答题卡,电视200从在线视频课程视频播放界面中通过图像识别得到答题卡的界面视图数据。
在本申请提供的电子设备间的协同方法的另一种实现方式中,手机100和电视200进行信息输入的协同包括以下过程:
请参见图3A,用户打开电视200,电视200的屏幕上显示在线视频课程应用2100以及其他如游戏、音乐等应用。
如果用户需要进行在线视频课程学习,则用户通过遥控器打开在线视频课程应用2100。电视在检测到遥控器对在线视频课程应用2100的打开操作后,打开(或开启)在线视频课程应用2100。
此时,手机100可以显示图3A所示的桌面界面。
电视200打开在线视频课程应用2100后,如图3B所示,电视200在屏幕上显示协同开启控件20,协同开启控件20用于用户选择是否需要手机100进行信息输入的协同,协同开启控件20可以包括说明信息“开启与手机100的协同”,以及“取消”控件和“确认”控件,也可以包括其他的信息,其可以根据需要设置。
需要说明的是,用户此时可以通过遥控器进行协同开启控件20包括的“取消”控件和“确认”控件的触发操作。
若电视200检测到用户通过遥控器对“确认”控件的触发操作,则电视200向手机100发送协同请求。另外,电视200检测到用户通过遥控器对“确认”控件的触发操作之后,可以播放在线视频课程,也可以不播放在线视频课程。
若电视200检测到用户对“取消”控件的触发操作,则电视200不向手机100发送协同请求,且电视200直接进行在线视频课程的播放。
手机100接收到电视200发送的协同请求后,在如图3B所示的界面上显示协同确认控件10,协同确认控件10可以包括说明信息“同意与电视200的协同”,以及“确认”控件和“取消”控件,当然也可以显示其他信息,其可以根据需要选择。
若手机100检测到用户对“确认”控件的触发操作,则手机100向电视200发送同意协同的应答信息。若手机100检测到用户对“取消”控件的触发操作,则手机100向电视200发送不同意协同的应答信息。
另外,手机100检测到用户对“确认”控件或的“取消”控件的触发操作后,手机100显示图3C所述的桌面界面。
手机100和电视200两个设备之间的协商可以在在线视频课程开始播放时进行,也可以是在在线视频课程的播放过程中被触发。在协商是在在线视频课程开始播放时进行的情况下,电视200接收到同意协同的应答信息后,随即电视200开始播放在线视频课程;在协商是在在线视频课程的播放过程中被触发的情况下,电视200当前正在播放在线视频课程,电视200触发协商并完成协商后,则电视200继续播放在线视频课程即可。
电视200播放在线视频课程时,电视200的屏幕上显示在线视频课程的全部信息。如图3C所示,电视200的屏幕上可以显示课件信息21(例如PPT文件图像),和讲课的老师的图像信息22。
另外,在在线视频课程的播放过程中,如果老师出了一道题需要用户进行解答,则如图3D所示,在线视频课程的视频播放界面显示答题卡23。答题卡23包括问题“下面哪个是三角形()”、以及选择项A、B、C、D及各选择项对应的图形。
为便于用户进行答案输入,电视200在屏幕上出现答题卡23后,电视200将答题卡23发送至手机100进行显示,以使得用户可以在手机100进行答案输入,然后由手机100再将答案发送至电视200。
电视200将该答题卡23发送至手机100进行显示,可以是电视200将答题卡23的界面视图数据发送至手机100,使得手机100根据界面视图数据生成(或者也可以称为构建)如图3D所示的手机100的屏幕上显示的协同答题卡11。协同答题卡11与答题卡31显示的信息和布局可以完全相同,协同答题卡11也包括问题“下面哪个是三角形()”、以及选择项A、B、C、D及各选项对应的图形。
用户可以点击手机100的屏幕上显示的协同答题卡11包括的各选择项的对应区域。手机100检测到用户的触控操作,则视为对该选项进行了点击的选择操作,完成答题。如图3E所示,手机100检测到用户对选择项“C”的点击操作后,得到答案“C”,且手机100在协同答题卡11的“()”中显示答案“C”。
在一种实现方式中,手机100检测到用户输入的答案“C”后,可以直接将答案“C”发送给电视200。
在另一种实现方式中,手机100检测到用户输入的答案“C”后,还可以显示如图3F所示的发送选择控件12,发送选择控件12可以包括“确认”控件和“取消”控件。若手机100检测到用户对“确认”控件的点击操作,则手机100接收到确认发送指令,手机100将用户输入的答案“C”,发送给电视200。对选择选项的处理细节在后面进行解释。
手机100将答案“C”发送给电视200后,手机100可以显示如图3G所示的界面,该界面包括提示信息13,提示信息13可以是“您已完成答题”,以提醒用户已完成答题。当然,提示信息13也可以是其他如“您已选择答案C”等信息,其可以根据需要选择。
手机100将答案“C”发送给电视200后,也可以继续显示图3D所示的界面,如果电视200进一步向手机100发送了新的答题卡,则手机100显示新的答题卡。
若手机100检测到用户对发送选择控件12中的“取消”控件的点击操作,则手机100一方面不向电视200发送答案“C”,另一方面手机100可以删除“()”中用户已输入的答案“C”,以用于用户重新输入新的答案。
另外,用户也可以直接点击其他选择项,以实现新答案的输入。或者用户可以点击“()”,对“()”中已填入的答案进行删除操作,手机100可以接收用户对已填入答案的删除操作,以及用户重新输入新的答案的输入操作,以得到用户新输入的答案,
另外,如果手机100检测到用户在规定时间内未点击“确定”控件,则手机100也可以向电视200发送用户未完成本次答题的信息输入的通知信息,且如图3H所示,手机100的屏幕上可以显示提示信息14,提示信息14可以是“本次答题未完成”,以提醒用户未通过手机100对该题进行答复。
规定时间可以是30秒或者60秒,也可以是其他任意时间,其可以根据需要设置。
在本申请的一种实现方式中,电视200接收到手机发送的答案“C”后,可以直接将该答案“C”发送给服务器300。老师可以通过服务器300查看用户输入的答案。
另外,电视200将答案“C”发送给服务器后,如图3I所示,电视200可以显示提示信息25,例如显示“已将答案发给服务器300”,以告知用户已成功完成了答题。
在本申请的另一种实现方式中,电视200接收到用户输入的答案“C”后,还可以在电视200的屏幕上显示该答案,以便用户通过电视200查看答案。如图3I所示,电视200可以显示提示信息25,提示信息25为“手机100选择C”。当然电视200还可以通过语音播放“您已选择C”等,其可以根据需要设置。
本申请中,电视200可以只将用户输入的答案发送给服务器300,电视200也可以将答案和手机100的标识信息发送给服务器300,以使老师通过服务器300可以知道答题者是谁。
需要说明的是,在本申请的另一些实现方式中,用户通过遥控器触发前述的图3B所示的电视200的屏幕上显示的协同开启控件10的场景中,如果电视200的屏幕为触控屏,则用户也可以点击电视200上的“取消”控件和“确认”控件进行触发操作。当然,如果手机100包括可以实现遥控功能的遥控器应用,用户也可以通过手机100中的遥控器应用进行触发操作。
在本申请的另一些实现方式中,用户点击图3E所示的手机100的屏幕上显示的协同答题卡11进行答题还可以是,用户点击括号“()”,“()”提供一个文本域,供用户输入文本。手机100检测到用户对“()”的点击操作后,如图4A所示,手机100可以显示输入键盘15,用户通过输入键盘15可以进行答题输入,例如用户点击输入键盘15上的“C”,则手机100上的“()”中显示“C”。手机100将用户输入的文本数据“C”,传送到电视200,电视200再将文本数据“C”传递至服务器300。
在本申请的另一些实现方式中,用户点击图3E所示的手机100的屏幕上显示的协同答题卡11进行答题还可以是,用户点击括号“()”,手机100检测到用户对“()”的点击操作后,如图4B所示,手机100可以显示涂鸦笔工具16,用户点击涂鸦笔工具16之后,可以通过涂鸦笔对选择项进行勾画操作,如勾画答案“C”。手机100可以检测到用户通过涂鸦笔工具16对答案“C”的触发操作,得到输入的文本数据“C”,手机100再经过电视200将文本数据“C”传递至传送到服务器300。
另外也可以如图4C所示,在“()”中直接通过涂鸦笔进行手写以输入答案“C”。手机100通过图像识别方法对协同答题卡11的界面进行图像识别得到新增的文本“C”,即可以得到用户通过涂鸦笔工具16输入的答案的文本“C”,手机100再经过电视200将文本数据“C”传递至服务器300。
图像识别技术可以是光学字符识别(Optical Character Recognition,OCR)技术,也可以是其他技术。
在本申请的另一些实现方式中,答题卡23还可以是用于用户进行文字输入的填空题类型的答题卡。如图5所示,手机100上显示协同答题卡11。若手机100检测到用户在“”区域的点击操作,则手机100显示输入键盘17,以用于用户进行文字输入。手机100得到用户输入的文字内容后,将该文字内容以文本数据的形式作为答案发送给电视200。电视200再将该文字内容以文本数据的形式传递给服务器300。
需要说明的是本申请中,输入键盘15和输入键盘17是手机100自带输入法对应的输入键盘,其类型可以根据需要设置,用户可以通过输入键盘15和输入键盘17进行中文、英文、手写模式等多种模式的切换。
在本申请的另一些实现方式中,答题卡23还可以是用于用户进行文件添加类型的答题卡。则用户可以通过手机100在协同答题卡11中添加文件,手机100将文件发送给电视200。文件可以是图片文件,则手机100将图片文件发送给电视200,文件还可以是Word等其他文件。
在本申请的另一些实现方式中,答题卡23还可以是用于用户语音输入的答题卡。则答题卡上可以显示语音输入控件,用户长按该语音输入控件,则可以输入语音,输入完毕后,用户松开该语音输入控件。则手机100可以将用户输入的语音数据通过电视200发送至服务器300。另外,手机100还可以对用户输入的语音进行解析则可以得到文本数据,手机100将文本数据通过电视200发送至服务器300。
需要说明的是,本申请中,如果通过电视200观看在线视频课程的用户只有一个,则电视200可以只与手机10进行单个设备的信息输入的协同,如果通过电视200观看在线视频课程的用户有多个,则电视200也可以同时与多个设备建立通信连接,并进行信息输入协同。
如图6所示,电视200可以与手机100、手机400、以及PC500三个设备同时建立通信连接,且进行信息输入的协同。即电视200可以分别将答题卡23发送给手机100、手机400、以及PC500,手机100、手机400、以及PC500分别显示协同答题卡11,且手机100、手机400、以及PC500的用户分别在手机100、手机400、以及PC500上进行答题,手机100、手机400、以及PC500再分别将答案发送给电视200。电视200将所有的答案再发送给服务器300,则老师可以获得观看在线视频课程的所有用户的答案。
需要说明的是,电视200将所有的答案再发送给服务器300的同时,还包括将各答案对应的设备的标识信息发送给服务器300,以使老师可以知道答题者以及对应的答案。
本申请提供的电子设备间的协同方法,应用于电视200与多个设备进行协同的场景,当多个用户同时使用电视200观看在线视频课程时,多个用户可以分别通过各自的设备完成答题,避免了通过遥控器无法实现多个用户进行答题的问题,提高了用户的体验感。
本申请提供的电子设备间的协同方法,还可以应用于用户通过电视200进行视频会议的场景。
如图7所示,电视200打开视频会议应用,电视200显示参会者的图像信息(例如参会者1、参会者2、参会者3等),以及显示作为目标界面的意见征集输入框27,则电视200将该意见征集输入框27的界面视图数据发送给手机100,手机100生成并显示协同意见征集框18。且手机100接收用户在该协同意见征集框18中的文字输入操作,得到用户的输入信息,将输入信息发送给电视200。电视200接收到输入信息后,同样可以将输入信息发送给服务器300。
本申请提供的电子设备间的协同方法,还可以应用于用户通过电视观看其他例如电影、电视剧等视频的场景。例如电视200播放电影,电影播放界面上包括作为目标界面的弹幕输入框,则电视200可以将弹幕输入框对应的界面视图数据发送至手机100,手机100生成对应于弹幕输入框的协同弹幕输入框,以用于用户在协同弹幕输入框中输入弹幕信息,且手机100接收用户在该协同弹幕输入框中的输入操作,得到用户输入的弹幕信息,将弹幕信息发送给电视200。电视200收到弹幕信息后,同样可以将弹幕信息发送给服务器300。
本申请提供的电子设备间的协同方法,还可以应用于电视200需要进行密码输入、频道选择等需要用户进行信息输入的场景,本申请对这些场景下的手机100对电视200的协同过程不再赘述。
本申请提供的电子设备间的协同方法,可以实现手机100和电视200之间的跨设备协同和在线互动,可以充分利用手机100的触发或触控功能的便利性,以及电视200大屏显示的优越性,通过多设备协同,实现较好的互动效果。
本申请的应用场景不限于前述的协同系统及场景,也可以是除了手机100以外的其他设备与电视200或其他的电子设备运用根据本申请的协同方法进信息输入协同处理。本申请提供的电子设备间的协同方法,应用于第一电子设备需要进行信息输入时,用户不方便对第一电子设备进行信息输入操作的场景,第一电子设备可以将第一电子设备上用于用户进行信息输入的目标界面至用户方便进行输入操作的第二电子设备进行显示,使得用户在第二电子设备上进行信息输入,然后第二电子设备再将输入信息发送给第一电子设备,以方便、快捷地完成第一电子设备的信息输入。
在本申请一些实施例中,还提供了一种电子设备,下面结合图8对本申请实施例中的电子设备进行介绍。
图8为本申请实施例公开的一种电子设备的结构示意图。对于至少一个实施例中,控制器中枢804经由诸如前端总线(FSB)之类的多分支总线、诸如快速通道互连(QPI)之类的点对点接口、或者类似的连接与处理器801进行通信。处理器801执行控制一般类型的数据处理操作的指令。在一实施例中,控制器中枢804包括,但不局限于,图形存储器控制器中枢(GMCH)(图中未示出)和输入/输出中枢(IOH)(其可以在分开的芯片上)(图中未示出),其中GMCH包括存储器和图形控制器并与IOH耦合。
电子设备800还可包括耦合到控制器中枢804的协处理器806和存储器802。或者,存储器802和GMCH中的一个或两者可以被集成在处理器801内(如本申请中所描述的),存储器802和协处理器806直接耦合到处理器801以及控制器中枢804,控制器中枢804与IOH处于单个芯片中。
在一个实施例中,存储器802可以是例如动态随机存取存储器(DRAM)、相变存储器(PCM)或这两者的组合。存储器802中可以包括用于存储数据和/或指令的一个或多个有形的、非暂时性计算机可读介质。计算机可读存储介质中存储有指令,具体而言,存储有该指令的暂时和永久副本。
在一个实施例中,协处理器806是专用处理器,诸如例如高吞吐量MIC处理器、网络或通信处理器、压缩引擎、图形处理器、GPU、或嵌入式处理器等等。协处理器806的任选性质用虚线表示在图8中。
在一个实施例中,电子设备800可以进一步包括网络接口(NIC)803。网络接口803可以包括收发器,用于为电子设备800提供无线电接口,进而与任何其他合适的设备(如前端模块,天线等)进行通信。在各种实施例中,网络接口803可以与电子设备800的其他组件集成。网络接口803可以实现上述实施例中的通信单元的功能。
在一个实施例中,如图8所示的,电子设备800可以进一步包括输入/输出(I/O)设备805。输入/输出(I/O)设备805可以包括:用户界面,该设计使得用户能够与电子设备800进行交互;外围组件接口的设计使得外围组件也能够与电子设备800交互;和/或传感器设计用于确定与电子设备800相关的环境条件和/或位置信息。
值得注意的是,图8仅是示例性的。即虽然图8中示出了电子设备800包括处理器801、控制器中枢804、存储器802等多个器件,但是,在实际的应用中,使用本申请各方法的设备,可以仅包括电子设备800各器件中的一部分器件,例如,可以仅包含处理器801和NIC803。图8中可选器件的性质用虚线示出。
在本申请一些实施例中,该电子设备800的计算机可读存储介质中存储有指令可以包括:由处理器中的至少一个单元执行时导致设备实施如前述电子设备间的协同方法的指令。当指令在计算机上运行时,使得计算机执行上述如前述的电子设备间的协同方法。
请参见图9,图9所示为根据本申请的一实施方式提供的SoC(System on Chip,片上系统)1000的结构示意图。在图9中,相似的部件具有同样的附图标记。另外,虚线框是更先进的SoC1000的可选特征。该SoC1000可以被用于根据本申请的任一电子设备。根据其所在的设备不同以及其内所存储的指令的不同,可以实现相应的功能。
在图9中,SoC1000包括:互连单元1002,其被耦合至处理器1001;系统代理单元1006;总线控制器单元1005;集成存储器控制器单元1003;一组或一个或多个协处理器1007,其可包括集成图形逻辑、图像处理器、音频处理器和视频处理器;SRAM(静态随机存取存储器)单元1008;DMA(直接存储器存取)单元1004。在一个实施例中,协处理器1007包括专用处理器,诸如例如网络或通信处理器、压缩引擎、GPGPU、高吞吐量MIC处理器、或嵌入式处理器等等。
SRAM单元1008中可以包括用于存储数据和/或指令的一个或多个计算机可读介质。计算机可读存储介质中可以存储有指令,具体而言,存储有该指令的暂时和永久副本。该指令可以包括:由处理器中的至少一个单元执行时导致电子设备实施如前述所提到的电子设备间的协同方法。
本申请公开的机制的各实施例均可以以软件、硬件、固件或这些实现方法的组合等方式实现。本申请的实施例可实现为在可编程系统上执行的计算机程序或程序代码,该可编程程序包括至少一个处理器、存储器(或存储系统,包括易失性和非易失性存储器和/或存储单元)。
需要说明的是,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
需要说明的是,在附图中,可以以特定布置和/或顺序示出一些结构或方法特征。然而,应该理解,可能不需要这样的特定布置和/或排序。而是,在一些实施例中,这些特征可以以不同于说明性附图中所示的方式和/或顺序来布置。另外,在特定图中包括结构或方法特征并不意味着暗示在所有实施例中都需要这样的特征,并且在一些实施例中,可以不包括这些特征或者可以与其他特征组合。
虽然通过参照本申请的某些优选实施方式,已经对本申请进行了图示和描述,但本领域的普通技术人员应该明白,以上内容是结合具体的实施方式对本申请所作的进一步详细说明,不能认定本申请的具体实施只局限于这些说明。本领域技术人员可以在形式上和细节上对其作各种改变,包括做出若干简单推演或替换,而不偏离本申请的精神和范围。
Claims (26)
1.一种电子设备间的协同方法,应用于至少包括第一电子设备和第二电子设备的系统,其中,所述第一电子设备和所述第二电子设备建立通信连接,其特征在于,所述方法包括:
所述第一电子设备运行应用,根据所述应用对应的应用业务数据显示应用业务界面,所述应用业务界面包括目标界面,所述目标界面为所述应用业务界面的部分界面,且为所述应用业务界面上用于用户进行信息输入的界面部分;
所述第一电子设备将与所述目标界面对应的界面视图数据发送至所述第二电子设备;
所述第二电子设备接收所述界面视图数据,根据所述界面视图数据生成并显示与所述目标界面对应的协同界面;
所述第二电子设备接收用户对所述协同界面的信息输入操作得到输入信息;
所述第二电子设备将所述输入信息发送至所述第一电子设备,以实现所述第二电子设备对所述第一电子设备的信息输入的协同。
2.根据权利要求1所述的电子设备间的协同方法,其特征在于,所述应用为视频应用,所述应用业务界面为所述视频应用的视频播放界面,所述目标界面为所述视频播放界面上用于用户进行信息输入的界面部分,所述协同界面为所述用于用户进行信息输入的界面部分对应的界面,所述应用业务数据为所述视频应用的视频流媒体数据,所述界面视图数据为所述用于用户进行信息输入的界面部分的数据。
3.根据权利要求1所述的电子设备间的协同方法,其特征在于,所述应用为在线视频课程播放场景中的在线视频课程应用,所述应用业务界面为所述在线视频课程应用播放在线视频课程的视频播放界面,所述目标界面为所述视频播放界面上的答题卡,所述协同界面为所述答题卡对应的协同答题卡,所述应用业务数据为所述在线视频课程的视频流媒体数据,所述视频流媒体数据包括讲课老师的图像信息以及课件信息,所述课件信息包括所述答题卡,所述界面视图数据为所述答题卡的数据。
4.根据权利要求1所述的电子设备间的协同方法,其特征在于,所述界面视图数据包括所述目标界面上各界面元素的界面元素信息,以及各界面元素的布局信息,所述第二电子设备根据所述界面视图数据生成与所述目标界面对应的协同界面,包括:
所述第二电子设备根据所述界面视图数据进行视图渲染处理生成与所述目标界面对应的协同界面,其中,所述协同界面包括的各界面元素与所述目标界面包括的各界面元素相同,且所述协同界面包括的各界面元素的布局与所述目标界面包括的各界面元素的布局相同。
5.根据权利要求1所述的电子设备间的协同方法,其特征在于,所述方法还包括:
所述第一电子设备从管理设备获取所述应用对应的所述应用业务数据以用于所述应用业务界面的显示,以及获取所述目标界面对应的所述界面视图数据。
6.根据权利要求1所述的电子设备间的协同方法,其特征在于,所述应用为视频播放应用,所述方法还包括:
所述第一电子设备显示所述目标界面时,所述第一电子设备停止播放视频;
所述第一电子设备接收到所述输入信息之后,所述第一电子设备播放所述视频。
7.根据权利要求1-6任一项所述的电子设备间的协同方法,其特征在于,所述信息输入操作包括以下任意一种:
文字输入操作;
对选择项的选择操作;
文件添加操作;
语音输入操作。
8.根据权利要求1-6任一项所述的电子设备间的协同方法,其特征在于,所述方法还包括:
所述第二电子设备检测到用户对所述协同界面的触发操作,生成并显示信息输入控件;
所述第二电子设备接收用户通过所述信息输入控件对所述协同界面的信息输入操作。
9.根据权利要求1-6任一项所述的电子设备间的协同方法,其特征在于,所述第二电子设备将所述输入信息发送至所述第一电子设备之后,还包括:
所述第二电子设备更新所述协同界面,显示第二界面。
10.根据权利要求1-6任一项所述的电子设备间的协同方法,其特征在于,所述第一电子设备接收到所述输入信息之后,所述方法还包括,所述第一电子设备执行以下至少一项操作:
所述第一电子设备显示已接收到所述输入信息的第一提示信息;
所述第一电子设备显示所述输入信息;
所述第一电子设备将所述输入信息发送至管理设备,且所述第一电子设备显示已将所述输入信息发送至所述管理设备的第二提示信息;
所述第一电子设备将所述第二电子设备的标识信息发送至所述管理设备。
11.根据权利要求1-6任一项所述的电子设备间的协同方法,其特征在于,所述方法还包括:
所述第一电子设备向所述第二电子设备发送协同请求,所述协同请求用于请求所述第二电子设备进行信息输入协同;
所述第二电子设备接收所述协同请求,生成并发送同意协同的应答信息给所述第一电子设备;
所述第一电子设备接收所述应答信息,根据所述应答信息将所述界面视图数据发送至所述第二电子设备。
12.根据权利要求11所述的电子设备间的协同方法,其特征在于,所述方法还包括:
所述第一电子设备显示所述目标界面之后,所述第一电子设备显示协同开启控件;
所述第一电子设备检测到用户对所述协同开启控件的确认开启触发操作,向所述第二电子设备发送所述协同请求。
13.根据权利要求12所述的电子设备间的协同方法,其特征在于,所述方法还包括:
所述第二电子设备接收所述协同请求,生成并显示协同确认控件;
所述第二电子设备检测到用户对所述协同确认控件的确认触发操作,生成所述应答信息。
14.根据权利要求11所述的电子设备间的协同方法,其特征在于,所述协同请求包括所述第一电子设备的标识信息;所述第二电子设备根据所述第一电子设备的标识信息对所述第一电子设备进行鉴权,若鉴权通过,所述第二电子设备生成所述应答信息。
15.根据权利要求1-6任一项所述的电子设备间的协同方法,其特征在于,所述方法还包括:所述第二电子设备接收确认发送指令,将所述输入信息发送至所述第一电子设备。
16.根据权利要求15所述的电子设备间的协同方法,其特征在于,
所述第二电子设备得到所述输入信息之后,显示发送选择控件;
所述第二电子设备通过用户对所述发送选择控件的确认发送触发操作接收所述确认发送指令。
17.根据权利要求1-6任一项所述的电子设备间的协同方法,其特征在于,所述方法还包括:所述第一电子设备和所述第二电子设备通过各自的分布式通信模块进行二者之间的信息传输。
18.一种电子设备间的协同方法,应用于第一电子设备,所述第一电子设备和第二电子设备建立通信连接,其特征在于,所述方法包括:
所述第一电子设备运行应用,根据所述应用对应的应用业务数据显示应用业务界面,所述应用业务界面包括目标界面,所述目标界面为所述应用业务界面的部分界面,且为所述应用业务界面上用于用户进行信息输入的界面部分;
所述第一电子设备将与所述目标界面对应的界面视图数据发送至所述第二电子设备,以使所述第二电子设备根据所述界面视图数据生成并显示与所述目标界面对应的协同界面,且使得所述第二电子设备接收用户对所述协同界面的信息输入操作得到输入信息;
所述第一电子设备接收所述第二电子设备发送的所述输入信息。
19.根据权利要求18所述的电子设备间的协同方法,其特征在于,所述信息输入操作包括以下任意一种:
文字输入操作;
对选择项的选择操作;
文件添加操作;
语音输入操作。
20.一种电子设备间的协同方法,应用于第二电子设备,所述第二电子设备和第一电子设备建立通信连接,其特征在于,所述方法包括:
所述第二电子设备接收所述第一电子设备发送的界面视图数据,所述界面视图数据为所述第一电子设备显示的目标界面对应的界面视图数据,所述目标界面为所述第一电子设备根据运行应用对应的应用业务数据显示的应用业务界面的部分界面,且为所述应用业务界面上用于用户进行信息输入的界面部分;
所述第二电子设备根据所述界面视图数据生成并显示与所述目标界面对应的协同界面;
所述第二电子设备接收用户对所述协同界面的信息输入操作得到输入信息;
所述第二电子设备将所述输入信息发送至所述第一电子设备,以实现所述第二电子设备对所述第一电子设备的信息输入的协同。
21.根据权利要求20所述的电子设备间的协同方法,其特征在于,所述信息输入操作包括以下任意一种:
文字输入操作;
对选择项的选择操作;
文件添加操作;
语音输入操作。
22.根据权利要求20所述的电子设备间的协同方法,其特征在于,所述方法还包括:
所述第二电子设备检测到用户对所述协同界面的触发操作,生成并显示信息输入控件;
所述第二电子设备接收用户通过所述信息输入控件对所述协同界面的信息输入操作。
23.根据权利要求20-22任一项所述的电子设备间的协同方法,其特征在于,所述第二电子设备将所述输入信息发送至所述第一电子设备之后,还包括:
所述第二电子设备更新所述协同界面,显示第二界面。
24.一种协同系统,其特征在于,至少包括第一电子设备和第二电子设备,所述第一电子设备和所述第二电子设备建立通信连接,其中:
所述第一电子设备用于运行应用,根据所述应用对应的应用业务数据显示应用业务界面,所述应用业务界面包括目标界面,所述目标界面为所述应用业务界面的部分界面,且为所述应用业务界面上用于用户进行信息输入操作的界面部分;
所述第一电子设备用于将与所述目标界面对应的界面视图数据发送至所述第二电子设备;
所述第二电子设备用于接收所述界面视图数据,根据所述界面视图数据生成并显示与所述目标界面对应的协同界面;
所述第二电子设备用于接收用户对所述协同界面的信息输入操作得到输入信息;
所述第二电子设备用于将所述输入信息发送至所述第一电子设备,以实现所述第二电子设备对所述第一电子设备的信息输入的协同。
25.一种电子设备,其特征在于,包括:
存储器,用于存储程序,所述程序包括程序指令;
控制部件,用于执行所述程序指令,以使电子设备执行如权利要求18至19中任一项所述的电子设备间的协同方法;或者以使电子设备执行如权利要求20至23中任一项所述的电子设备间的协同方法。
26.一种可读取存储介质,其特征在于,所述可读取存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令被电子设备运行以使电子设备执行如权利要求18至19中任一项所述的电子设备间的协同方法;或者以使电子设备执行如权利要求20至23中任一项所述的电子设备间的协同方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010744234.2A CN114071425B (zh) | 2020-07-29 | 2020-07-29 | 电子设备间的协同方法、协同系统和电子设备 |
CN202410671892.1A CN118488279A (zh) | 2020-07-29 | 2020-07-29 | 电子设备间的协同方法、协同系统和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010744234.2A CN114071425B (zh) | 2020-07-29 | 2020-07-29 | 电子设备间的协同方法、协同系统和电子设备 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410671892.1A Division CN118488279A (zh) | 2020-07-29 | 2020-07-29 | 电子设备间的协同方法、协同系统和电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114071425A CN114071425A (zh) | 2022-02-18 |
CN114071425B true CN114071425B (zh) | 2024-05-03 |
Family
ID=80226891
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410671892.1A Pending CN118488279A (zh) | 2020-07-29 | 2020-07-29 | 电子设备间的协同方法、协同系统和电子设备 |
CN202010744234.2A Active CN114071425B (zh) | 2020-07-29 | 2020-07-29 | 电子设备间的协同方法、协同系统和电子设备 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410671892.1A Pending CN118488279A (zh) | 2020-07-29 | 2020-07-29 | 电子设备间的协同方法、协同系统和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (2) | CN118488279A (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116841761A (zh) * | 2022-03-24 | 2023-10-03 | 华为技术有限公司 | 一种设备协同方法 |
CN117289990A (zh) * | 2022-06-16 | 2023-12-26 | 华为技术有限公司 | 控制跨设备应用的方法以及电子设备 |
CN116679895B (zh) * | 2022-10-26 | 2024-06-07 | 荣耀终端有限公司 | 一种协同业务的调度方法、电子设备及协同系统 |
CN118055469A (zh) * | 2022-11-09 | 2024-05-17 | 华为技术有限公司 | 通信方法、通信系统及电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104813265A (zh) * | 2012-11-28 | 2015-07-29 | 微软公司 | 交互式白板共享 |
CN110941501A (zh) * | 2019-11-29 | 2020-03-31 | 维沃移动通信有限公司 | 一种应用共享方法及电子设备 |
CN111028052A (zh) * | 2019-11-28 | 2020-04-17 | 维沃移动通信有限公司 | 一种界面操作方法及电子设备 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104506650B (zh) * | 2015-01-04 | 2018-07-03 | 华为技术有限公司 | 一种用户设备协同控制方法、用户设备以及通信系统 |
CN104850463B (zh) * | 2015-06-08 | 2019-11-15 | 三星电子(中国)研发中心 | 应用程序共享方法及装置 |
CN106453538A (zh) * | 2016-09-29 | 2017-02-22 | 努比亚技术有限公司 | 屏幕共享装置和方法 |
US11157149B2 (en) * | 2017-12-08 | 2021-10-26 | Google Llc | Managing comments in a cloud-based environment |
-
2020
- 2020-07-29 CN CN202410671892.1A patent/CN118488279A/zh active Pending
- 2020-07-29 CN CN202010744234.2A patent/CN114071425B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104813265A (zh) * | 2012-11-28 | 2015-07-29 | 微软公司 | 交互式白板共享 |
CN111028052A (zh) * | 2019-11-28 | 2020-04-17 | 维沃移动通信有限公司 | 一种界面操作方法及电子设备 |
CN110941501A (zh) * | 2019-11-29 | 2020-03-31 | 维沃移动通信有限公司 | 一种应用共享方法及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN114071425A (zh) | 2022-02-18 |
CN118488279A (zh) | 2024-08-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114071425B (zh) | 电子设备间的协同方法、协同系统和电子设备 | |
US20230217366A1 (en) | Access method, access apparatus, and storage medium | |
US11025686B2 (en) | Network call method and apparatus, terminal, and server | |
US20200004394A1 (en) | Sticker presentation method and apparatus and computer-readable storage medium | |
EP3547697A1 (en) | Live-broadcasting room video stream pushing control method, and corresponding server and mobile terminal | |
CN109408168B (zh) | 一种远程交互方法和终端设备 | |
CN110166439B (zh) | 设备共享方法、终端、路由器及服务器 | |
CN113760145B (zh) | 一种互动方法、装置、电子设备及存储介质 | |
CN112527174B (zh) | 一种信息处理方法及电子设备 | |
US20180103234A1 (en) | Device and method of displaying images | |
CN111782115B (zh) | 应用程序控制方法、装置及电子设备 | |
US20230138804A1 (en) | Enhanced video call method and system, and electronic device | |
CN112527222A (zh) | 一种信息处理方法及电子设备 | |
CN113365153B (zh) | 数据分享方法、装置、存储介质及电子设备 | |
CN118069007A (zh) | 一种屏幕共享方法、装置、设备及存储介质 | |
CN112672201B (zh) | 一种录屏帧率控制方法、设备及计算机可读存储介质 | |
WO2021190373A1 (zh) | 一种交互方法、交互系统和显示设备 | |
KR20190016671A (ko) | 통신 장치, 서버 및 통신 방법 | |
JP2013145557A (ja) | 携帯式電子装置に用いられるインスタントメッセージング方法及びそのシステム | |
CN111367444A (zh) | 应用功能执行方法、装置、电子设备及存储介质 | |
US20240095335A1 (en) | Processing method, device, and storage medium | |
CN116136876A (zh) | 视频推荐的处理方法、装置和电子设备 | |
US20230413349A1 (en) | Call establishment method and apparatus, electronic device, and readable storage medium | |
CN110708494A (zh) | 视频会议的显示控制方法、终端及可读存储介质 | |
WO2023077738A1 (zh) | 资源包上传方法及装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |