CN115202546A - 一种跨设备交互方法及设备 - Google Patents
一种跨设备交互方法及设备 Download PDFInfo
- Publication number
- CN115202546A CN115202546A CN202110400031.6A CN202110400031A CN115202546A CN 115202546 A CN115202546 A CN 115202546A CN 202110400031 A CN202110400031 A CN 202110400031A CN 115202546 A CN115202546 A CN 115202546A
- Authority
- CN
- China
- Prior art keywords
- information
- user operation
- main control
- electronic device
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000006870 function Effects 0.000 claims description 96
- 230000015654 memory Effects 0.000 claims description 54
- 238000004891 communication Methods 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 23
- 230000008859 change Effects 0.000 claims description 9
- 230000004044 response Effects 0.000 claims description 8
- 238000011161 development Methods 0.000 abstract description 5
- 238000000926 separation method Methods 0.000 abstract description 3
- 238000007726 management method Methods 0.000 description 31
- 238000013461 design Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 16
- 238000012545 processing Methods 0.000 description 12
- 238000010295 mobile communication Methods 0.000 description 6
- 229920001621 AMOLED Polymers 0.000 description 5
- 230000003993 interaction Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000002408 directed self-assembly Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Telephone Function (AREA)
Abstract
本申请涉及终端技术领域,公开了一种跨设备交互方法及设备,用以实现跨设备的业务逻辑和UI分离,降低厂商的开发难度,减轻用户的使用成本,提高数据的安全性。该方法包括:电子设备响应于来自主控设备的用户界面UI信息,显示对应的UI,所述UI中至少包括第一功能选项,所述第一功能选项关联至少一个用户操作类型;所述电子设备响应于基于所述UI中所述第一功能选项的第一用户操作,向所述主控设备发送用户操作信息,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型,所述用户操作信息用于触发所述主控设备执行与所述用户操作信息对应的控制操作或管理操作。
Description
技术领域
本申请实施例涉及终端技术领域,尤其涉及一种跨设备交互方法及设备。
背景技术
物联网(internet of things,IoT)的发展,为人们的生活提供了极大的便利。目前,用户可以通过终端设备上安装的应用程序(application,APP),实现对物联网设备的远程控制。以智能家居设备为例,如图1所示,用户可以打开终端设备上安装的智能家居APP,由智能家居APP从云平台上获取关联的智能家居设备的各项数据并显示,也可以通过智能家居APP对智能家居设备下达控制指令,由智能家居APP通过云平台将控制指令发送给智能家居设备,实现对智能家居设备的控制。
发明内容
本申请实施例提供一种跨设备交互方法及设备,用以实现跨设备的业务逻辑和UI分离,降低厂商的开发难度,减轻用户的使用成本,提高数据的安全性。
第一方面,本申请实施例提供一种跨设备交互方法,该方法包括:电子设备响应于来自主控设备的用户界面UI信息,显示对应的UI,所述UI中至少包括第一功能选项,所述第一功能选项关联至少一个用户操作类型;所述电子设备响应于基于所述UI中所述第一功能选项的第一用户操作,向所述主控设备发送用户操作信息,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型,所述用户操作信息用于触发所述主控设备执行与所述用户操作信息对应的控制操作或管理操作。可选的,所述用户操作信息还包括基于所述第一用户操作获取到的用户输入信息。其中主控设备可以是IoT设备等。
在本申请实施例中,业务代码和UI代码全部运行在主控设备中,厂商无需为不同APP平台开发多个APP,可以降低开发难度、节约成本。另外主控设备无需向外暴露业务API,所有交互都通过UI,提高了数据的安全性,同时用户在电子设备上也无需下载不同厂商的APP,仅需一个显示应用即可以实现对不同厂商的主控设备的控制,有利于减轻用户的使用成本。
在一种可能的设计中,所述UI信息和所述用户操作信息为特定领域语言DSL格式的信息。
采用上述设计,可以使用DSL(如JSON格式代码等)在设备间传输UI与事件(如用户操作信息),有利于设备间对UI与事件的解析和识别。
在一种可能的设计中,所述方法还包括:所述电子设备响应于来自主控设备的UI信息之前,还包括:所述电子设备响应于从待连接设备列表中选取所述主控设备的第二用户操作,与所述主控设备建立通信连接。
上述设计中,主控设备可以在检测到与电子设备建立连接后,向电子设备发送自身的UI信息,有助于实现跨主控设备和电子设备的业务逻辑和UI分离。
在一种可能的设计中,所述电子设备发送用户操作信息之后,还包括:所述电子设备接收来自所述主控设备的UI更新信息,所述UI更新信息中至少包括所述主控设备执行与所述用户操作信息对应的控制操作或管理操作后所述UI的变化信息;所述电子设备响应于所述UI更新信息,更新所述UI。
上述设计中,在主控设备执行与用户操作信息对应的控制操作或管理操作后,电子设备根据主控设备发送的UI更新信息,将显示的UI更新为主控设备执行对应的控制操作或管理操作后的UI,有利于保持主控设备的业务逻辑与电子设备显示的UI的一致性。
第二方面,本申请实施例提供一种跨设备交互方法,该方法包括:主控设备向电子设备发送用户界面UI信息,所述UI信息对应的UI中至少包括第一功能选项,所述第一功能选项关联至少一个用户操作类型;所述主控设备接收来自所述电子设备的用户操作信息,所述用户操作信息是所述电子设备基于所述UI中所述第一功能选项的第一用户操作获取到的,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型;所述主控设备执行与所述操作信息所对应的控制操作或管理操作。可选的,所述用户操作信息还包括基于所述第一用户操作获取到的用户输入信息。
在一种可能的设计中,所述UI信息和所述用户操作信息为特定领域语言DSL格式的信息。
在一种可能的设计中,所述主控设备向电子设备发送UI信息,包括:所述主控设备与所述电子设备建立通信连接后,向所述电子设备发送UI信息。
在一种可能的设计中,所述主控设备执行与所述操作信息所对应的控制操作或管理操作之后,还包括:所述主控设备向所述电子设备发送UI更新信息,所述UI更新信息中至少包括所述主控设备执行与所述用户操作信息对应的控制操作或管理操作后所述UI的变化信息。
第三方面,本申请实施例还提供一种电子设备,所述电子设备包括:存储器、处理器和显示屏;其中,所述处理器与所述存储器和显示屏连接;所述存储器中存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述电子设备执行时,使得所述电子设备执行上述第一方面或者第一方面的任一种可能的设计中所述的方法。
第四方面,本申请实施例还提供一种主控设备,所述主控设备包括:存储器和处理器;其中,所述处理器与所述存储器连接;所述存储器中存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述主控设备执行时,使得所述主控设备执行上述第二方面或者第二方面的任一种可能的设计中所述的方法。
第五方面,本申请实施例还提供一种电子设备,该电子设备中包括能够执行上述第一方面或者第一方面的任一种可能的设计中方法的功能模块;这些功能模块可以通过硬件实现,也可以通过硬件执行相应的软件实现。
第六方面,本申请实施例还提供一种主控设备,该主控设备中包括能够执行上述第二方面或者第二方面的任一种可能的设计中方法的功能模块;这些功能模块可以通过硬件实现,也可以通过硬件执行相应的软件实现。
第七方面,本申请实施例还提供一种计算机存储介质,包括计算机指令,当所述计算机指令在计算机上运行时,使得所述计算机执行上述第一方面或者第一方面的任一种可能的设计中所述的方法,或执行上述第二方面或者第二方面的任一种可能的设计中所述的方法。
第八方面,本申请实施例还提供一种程序产品,当所述程序产品在计算机上运行时,使得所述计算机执行上述第一方面或者第一方面的任一种可能的设计中所述的方法,或执行上述第二方面或者第二方面的任一种可能的设计中所述的方法。
第九方面,本申请实施例提供的一种芯片,用于从存储器中调用并运行所述存储器中存储的计算机程序,执行上述第一方面或者第一方面的任一种可能的设计的方法,或执行上述第二方面或者第二方面的任一种可能的设计的方法。
上述第二方面至第九方面所能达到的技术效果请参照上述第一方面所能达到的技术效果,这里不再重复赘述。
附图说明
图1为智能家居设备控制方案示意图;
图2为本申请实施例提供的跨设备交互系统的架构示意图;
图3为本申请实施例提供的电子设备结构示意图之一;
图4为本申请实施例提供的电子设备界面示意图之一;
图5为本申请实施例提供的显示应用界面示意图;
图6为本申请实施例提供的view示意图之一;
图7为本申请实施例提供的UI示意图之一;
图8为本申请实施例提供的UI示意图之二;
图9为本申请实施例提供的电子设备和智能开关的架构示意图;
图10为本申请实施例提供的跨设备交互方法示意图;
图11为本申请实施例提供的view示意图之二;
图12为本申请实施例提供的电子设备的结构示意图之二;
图13为本申请实施例提供的主控设备的结构示意图。
具体实施方式
随着智能电灯、智能插座、智能水表等IoT设备的兴起,为人们的生活带来了诸多便利,但是目前用户购买了多个厂商的物联网设备后,需要在终端设备上安装多个厂商的APP,使用繁琐,厂商面对不同的APP平台也需要维护多个APP运维团队,运维成本高,并且IoT设备的数据在公网上传输也容易造成数据泄露与非法搜集。
有鉴于此,本申请实施例提供了一种跨设备交互方案,通过将业务逻辑和用户界面(user interface,UI)拆分的方式,使得应用可以跨设备显示与交互,用户可以使用手表、平板等任一带屏电子设备控制IoT设备,无需厂商维护多个APP运维团队,用户也无需下载不同厂商的多个APP,降低了厂商开发难度,提高了用户体验。另外,所有交互都通过UI实现,IoT设备也无需对外暴露业务应用程序接口(application programming interface,API),可以提高IoT设备数据的安全性。
如图2所示为本申请实施例提供的一种可能的跨设备交互系统的架构示意图,该系统包括多个主控设备(如智能开关、智能电灯、智能冰箱等)和电子设备,电子设备可以搭载不同的操作系统,并安装有同一款显示应用,电子设备和主控设备间可以通过WiFi、蓝牙、蜂窝网络等方式进行通信。通过将主控设备的业务逻辑和UI拆分的方式,将主控设备的UI在电子设备上进行显示,在主控设备和电子设备间传输UI和事件(如对UI中功能选项的操作),可以实现跨主控设备和电子设备的交互,实现对主控设备进行控制。
下面将结合附图,对本申请实施例中的技术方案进行清楚、完整地描述。为了便于本领域技术人员理解,首先对本申请实施例中的部分用语进行解释说明。
1)、主控设备,本申请实施例中的主控设备可以为IoT设备,例如可以为智能电灯、智能插座、智能开关、智能空调、智能冰箱等智能家居设备,也可以是智能红绿灯、智能水表、路侧单元(road side unit,RSU)等其它IoT设备。此外,本申请实施例的主控设备还可以是电视机等设备。需要理解的是,本申请实施例中的主控设备可以为不带屏设备,也可以为带屏设备。
2)、JS对象简谱(java script object notation,JSON)是一种轻量级的数据交换格式。它基于欧洲计算机协会制定的JS规范的一个子集,采用完全独立于编程语言的文本格式来存储和表示数据。简洁和清晰的层次结构使得JSON成为理想的数据交换语言。易于人阅读和编写,同时也易于机器解析和生成,并有效地提升网络传输效率。
3)、计算机领域的事件驱动,所谓事件驱动,简单来说就是基于产生的事件,计算机执行相应的响应操作。从事件角度说,事件驱动程序的基本结构是由一个事件收集器、一个事件发送器和一个事件处理器组成。事件收集器专门负责收集所有事件,包括来自用户操作的事件(如鼠标、键盘事件等)、来自硬件的事件(如时钟事件等)和来自软件的事件(如操作系统、应用程序的逻辑处理产生的事件等)。事件发送器负责将收集器收集到的事件分发到目标对象中。事件处理器做具体的事件响应工作。
4)、电子设备,本申请实施例中的电子设备可以为便携式终端设备,例如手机、平板电脑、便携式计算机、可穿戴式电子设备(如智能手表、智能头盔、智能眼镜、智能手环等)、VR设备、增强现实(augmented reality,AR)设备等。示例性的,便携式终端包括但不限于搭载鸿蒙或其他操作系统。此外,本申请实施例的电子设备还可以不是便携式终端设备,例如电视、个人计算机(personal computer,PC)等带屏的显示设备。
示例的,如图3所示,为本申请实施例的一种电子设备的硬件结构示意图。具体的,如图3所示,电子设备包括处理器110、外部存储器接口120、内部存储器121、通用串行总线(universal serial bus,USB)接口130、充电管理模块140、电源管理模块141、电池142、天线1、天线2、移动通信模块150、无线通信模块160、音频模块170、传感器模块180、按键190、指示器192、摄像头193、显示屏194、以及用户标识模块(subscriber identificationmodule,SIM)卡接口195等。其中,传感器模块180可以包括压力传感器、陀螺仪传感器、加速度传感器、指纹传感器、触摸传感器等,音频模块170可以包括扬声器、麦克风、耳机接口等。
处理器110可以包括一个或多个处理单元。例如:处理器110可以包括应用处理器(application processor,AP)、调制解调器(modem)、图形处理器(graphics processingunit,GPU)、图像信号处理器(image signal processor,ISP)、控制器、视频编解码器、数字信号处理器(digital signal processor,DSP)、基带处理器、和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,或者,两个或更多个不同的处理单元也可以集成在一个器件中。
处理器110中还可以设置存储器,用于存储计算机程序和/或数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的计算机程序和/或数据。如果处理器110需要再次使用该计算机程序和/或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。例如,处理器110包括通用串行总线(universal serial bus,USB)接口130、用户标识模块(subscriber identitymodule,SIM)接口195。再例如,处理器110还可以包括集成电路(inter-integratedcircuit,I2C)接口、集成电路内置音频(inter-integrated circuit sound,I2S)接口、脉冲编码调制(pulse code modulation,PCM)接口、通用异步收发传输器(universalasynchronous receiver/transmitter,UART)接口、移动产业处理器接口(mobileindustry processor interface,MIPI)、和/或通用输入输出(general-purpose input/output,GPIO)接口等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备的结构限定。在本申请另一些实施例中,电子设备也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口、Micro USB接口、USB Type C接口等。USB接口130可以用于连接充电器为电子设备充电,也可以用于电子设备与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如增强现实(augmented reality,AR)设备等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备的接触和分离。电子设备可以支持2个或N个SIM卡接口,N为大于2的正整数。SIM卡接口195可以支持Nano SIM卡、Micro SIM卡、SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备中,不能和电子设备分离。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142、充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110、内部存储器121、外部存储器、显示屏194、摄像头193和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量、电池循环次数、电池健康状态(漏电、阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备上的包括2G/3G/4G/5G/(6G等后续演进标准)等制式的无线通信的解决方案。移动通信模块150可以包括至少一个滤波器、开关、功率放大器、低噪声放大器(low noise amplifier,LNA)等。
无线通信模块160包括可以提供应用在电子设备上的包括无线局域网(wirelesslocal area networks,WLAN)(如Wi-Fi网络)、蓝牙(bluetooth,BT)、全球导航卫星系统(global navigation satellite system,GNSS)、调频(frequency modulation,FM)、近距离无线通信技术(near field communication,NFC)、红外技术(infrared,IR)等无线通信的解决方案。
在一些实施例中,电子设备的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM)、通用分组无线服务(general packet radio service,GPRS)、码分多址接入(code divisionmultiple access,CDMA)、宽带码分多址(wideband code division multiple access,WCDMA)、时分码分多址(time-division code division multiple access,TD-SCDMA)、长期演进(long term evolution,LTE)、BT、GNSS、WLAN、NFC、FM和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS)、全球导航卫星系统(globalnavigation satellite system,GLONASS)、北斗卫星导航系统(beidou navigationsatellite system,BDS)、准天顶卫星系统(quasi-zenith satellite system,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备通过GPU、显示屏194以及应用处理器等实现显示功能。显示屏194用于显示图像、视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystaldisplay,LCD)、有机发光二极管(organic light-emitting diode,OLED)、有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,AMOLED)、柔性发光二极管(flex light-emitting diode,FLED)、Miniled、MicroLed、Micro-oLed、量子点发光二极管(quantum dot light emitting diodes,QLED)等。在一些实施例中,电子设备可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备可以通过ISP、摄像头193、视频编解码器、GPU、显示屏194以及应用处理器等实现拍摄功能。ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光、色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。在一些实施例中,电子设备可以包括1个或N个摄像头193,N为大于1的正整数。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。
内部存储器121包括运行内存(memory)和内置存储器。其中,运行内存可以用于存储计算机程序和/或数据等。处理器110通过运行存储在运行内存的计算机程序,从而执行电子设备的各种功能应用以及数据处理。例如,运行内存可以包括高速随机存取存储器。而内置存储器又可以称之为内置外存等,可以用于存储计算机程序和/或数据。例如,内置存储器可以存储操作系统、应用程序等。电子设备通常将内置存储器中的计算机程序和/或数据加载到运行内存后,使得处理器110运行相应的计算机程序和/或数据,实现相应的功能。此外,内部存储器121可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、通用闪存存储器(universal flash storage,UFS)等。
电子设备可以通过音频模块170以及应用处理器等实现音频功能。例如音乐播放、录音等。
按键190包括开机键、音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备可以接收按键输入,产生与电子设备的用户设置以及功能控制有关的键信号输入。
指示器192可以是指示灯,可以用于指示充电状态、电量变化,也可以用于指示消息、未接来电、通知等。
触摸传感器,也称“触控面板”。触摸传感器可以设置于显示屏194,由触摸传感器与显示屏194组成触摸屏,也称“触控屏”。触摸传感器用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器也可以设置于电子设备的表面,与显示屏194所处的位置不同。
可以理解的是,本申请实施例示意的结构并不构成对电子设备的具体限定。在本申请另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
另外,应理解,本申请实施例中“至少一个”是指一个或者多个。“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系。例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的三种情况。其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一(项)个”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。
在本申请中,“示例的”、“在一些实施例中”、“在另一些实施例中”等用于表示作例子、例证或说明。本申请中被描述为“示例”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用示例的一词旨在以具体方式呈现概念。
需要指出的是,本申请实施例中涉及的“第一”、“第二”等词汇,仅用于区分描述的目的,而不能理解为指示或暗示相对重要性,也不能理解为指示或暗示顺序。
下面以主控设备为IoT设备中的智能开关为例,介绍本申请的跨设备交互方法。
以电子设备上支持跨设备交互的应用为显示应用且主控设备为智能开关为例,如图4中的A所示,为电子设备的显示屏上显示的主界面410,当用户需要控制智能开关时,用户可以点击主界面410上的显示应用的图标411,电子设备响应于用户点击显示应用的图标411的操作,在显示屏上显示显示应用的界面。例如:显示应用的界面可以如图4中的B所示的界面420。显示界面上包括3个功能选项:WiFi421、蓝牙422、账号423,这3个功能选项可由控件实现。其中,功能选项WiFi421用于控制显示应用搜索与电子设备处于同一WiFi网络的主控设备,并进入与电子设备处于同一WiFi网络的主控设备的管理界面;功能选项蓝牙422用于控制显示应用搜索位于电子设备蓝牙覆盖范围内的主控设备,并进入位于电子设备蓝牙覆盖范围内的主控设备的管理界面;功能选项账号423用于控制显示应用与显示应用服务器通过蜂窝网络进行通信,从显示应用服务器获取用户个人账号下关联的主控设备,进入用户个人账户下关联的主控设备的管理界面。可以理解的是,显示应用的界面420上还可以包括其它功能选项,例如用于控制退出显示应用的功能选项、配置用户个人账号的功能选项等。
以用户点击如图4中的B所示的界面420中的功能选项WiFi421为例,如图5所示,显示应用(也即电子设备)响应于用户点击功能选项WiFi421的操作,搜索与电子设备处于同一WiFi网络的主控设备,并进入与电子设备处于同一WiFi网络的主控设备的管理界面510,如果智能开关已经在设备列表511中,用户可以直接点击设备列表511中的“智能开关”选项,显示应用即可响应用户点击“智能开关”选项的操作,与智能开关建立WiFi连接。如果智能开关未在主控设备的设备列表511中,用户可以点击搜索按键512,显示应用即可响应用户点击搜索按键512的操作,重新搜索与电子设备处于同一WiFi的主控设备,对设备列表511中的主控设备进行更新。
在智能开关中运行着一个包含UI的代码的服务,示例性的,智能开关中运行的UI代码中包括背景颜色为rgba(30,144,255,0.7);功能选项(如组件)样式为“按钮”、属性为“已关闭”、支持的(或关联的)操作类型包括“单击”等信息,具体的UI代码可以如下所示:
当智能开关确定与电子设备建立通信连接或接收到来自电子设备的UI上报信息时,智能开关中的UI解析引擎可以将智能开关的UI(即UI代码)描述生成特定领域语言(domain specific language,DSL),并发送到电子设备上。
作为一种示例,智能开关可以将UI代码中的hml、Css、Js部分描述生成JSON格式代码,其中hml和Css部分主要描述了智能开关的UI的界面信息,Js部分主要描述了智能开关的UI中一个或多个功能选项(如组件)支持的操作类型(如支持单击、双击等)。如下所示为将智能开关的上述UI代码描述生成(也即转换成)的JSON格式代码示例。
电子设备上的显示应用在接收到来自智能开关的UI信息后,绘制智能开关的UI时,可以以视图(view)为单元进行绘制,如UI上一个图层对应一个view,显示应用绘制每个view的图形,然后将所有view的图形合成一个UI。具体而言,构建view树时,显示应用可以考虑不同的view之间的位置关系。以显示应用接收到的UI信息为上述JSON格式代码为例,显示应用对上述JSON格式代码进行解析,构建的view树如图6所示,view1对应图层1,view1位于背景上,背景可以作为一个单独的view即viewroot,view1为viewroot的子节点。其中由上述JSON格式代码可知,view1对应样式(也可以称为类型)为“按钮(button)”、属性为“已关闭”、支持的操作类型为“单击(onclick)”等信息,viewroot对应样式为“背景(div)”、背景色为“512819123”等。
显示应用根据view树,对view树中每个view进行布局渲染,合成一个UI。以viewroot为例,显示应用根据对应样式为“背景(div)”、背景色为“512819123”等,获取对应512819123的颜色,也即rgba(30,144,255,0.7),设置背景的颜色为rgba(30,144,255,0.7)。其中,rgba中rgb对应红(red,R)、绿(green,G)、蓝(blue,B),a代表阿尔法通道(alpha),通常指透明度。如图7所示为显示应用根据UI信息进行布局渲染后,显示的UI。
当用户在电子设备显示的UI上进行单击、双击等操作后,显示应用可以根据操作的位置确定用户操作在UI上所对应的功能选项,并判断用户操作是否为该功能选项支持的操作类型,如果是,显示应用将该功能选项的标识信息和用户操作的类型(如单击、双击等)描述生成DSL,发送至智能开关。
作为一种示例,如图7所示,用户在电子设备显示的UI上对样式为“按钮”的功能选项进行单击操作后,显示应用根据该操作的位置确定该操作在UI上所对应的功能选项为样式为“按钮”的功能选项、单击操作属于该功能选项支持的操作类型,显示应用将该功能选项的标识信息(如id)和用户操作的类型,如“单击操作(如onclick)”描述生成DSL,发送至智能开关。具体的DSL可以如下所示。
{
“id”:“2-onclick”
}
智能开关接收到该DSL后,解析该DSL,并调用对样式为“按钮”的功能选项进行单击操作对应的处理函数,执行对样式为“按钮”的功能选项进行单击操作所对应的打开指令,将智能开关打开,并将样式为“按钮”的功能选项的属性更新为“已打开”。
进一步的,智能开关的UI解析引擎将样式为“按钮”的功能选项更新后的属性信息转化成DSL,并发送给电子设备。如下所示,DSL包含将id为2的样式为“按钮”的功能选项的属性更新为“已打开”的信息。
如图8所示,显示应用根据接收到的DSL,将UI中样式为“按钮”的功能选项的属性由“已关闭”更新为“已打开”。
在另一种可能的实施中,智能开关将样式为“按钮”的功能选项的属性更新为“已打开”之后,也可以将智能开关更新后UI的整体信息发送给显示应用,显示应用根据智能开关更新后的UI信息,更新UI。
如图9所示为本申请实施例提供的一种智能开关和电子设备的架构示意图,界面布局描述中包括了描述智能开关的UI的界面信息的代码,逻辑代码中包括描述了智能开关的UI中一个或多个功能选项的事件信息(如对功能选项的操作)的代码,通过UI解析引擎(如JS引擎)对界面布局描述中的代码进行解析,智能开关可以获得智能开关的UI的界面信息,智能开关也可以获取逻辑代码中的接口信息(如一个或多个功能选项支持的操作类型),通过对智能开关的UI的界面信息和智能开关的UI中一个或多个功能选项支持的操作类型进行编码,将其转换成DSL发送给电子设备的显示应用。另外,智能开关也可以将与UI相关的资源,如媒体(音乐、视频、颜色等)、图像(如功能选项的图片等)发送给电子设备的显示应用。
显示应用解析接收到的DSL获得智能开关的UI的界面信息和智能开关的UI中一个或多个功能选项支持的操作类型,通过布局(layout)渲染,显示智能开关的UI。
当显示应用检测到针对显示的UI中某一目标功能选项的用户操作时,如果所述用户操作属于目标功能选项支持的操作类型,将所述用户操作的类型和目标功能选项的标识信息通过编码,转换为DSL后发送给智能开关,智能开关解析收到的DSL,调用对目标功能选项进行所述用户操作对应的处理函数,执行与对目标功能选项执行所述用户操作所对应的指令,并将更新后的目标功能选项的属性信息通过编码,转化成DSL反馈给显示应用,使得电子设备中的显示应用更新显示的UI。
需要理解的是,本申请实施中智能开关所执行的步骤,也可以通过智能开关中的应用实现,如通过智能开关中安装的开关应用实现。
以下实施例介绍通过电子设备和主控设备进行的跨设备交互的可能实现方式。图10示出了本申请以实施例提供的设备交互方法示意图,如图10所示,该方法的流程包括:
S1001:电子设备响应于从待连接设备列表中选取主控设备的第二用户操作,与主控设备建立通信连接。
在一些实施例中,电子设备可以通过WiFi、蓝牙等方式搜索与电子设备处于同一WiFi网络的主控设备,或者搜索位于电子设备蓝牙覆盖范围内的主控设备,也可以登录用户个人的账号通过服务器获取用户个人的账号下关联的主控设备,并可以根据从待连接设备列表选取主控设备的第二用户操作,与用户选取的主控设备建立通信连接。以电子设备搜索与电子设备处于同一WiFi网络的主控设备为例,如图5中的设备列表511为一种可能的待连接设备列表示例。
作为一种示例,如图5所示,用户选取与电子设备处于同一WiFi网络的主控设备(如智能开关)后,电子设备可以通过WiFi网络与用户选取的主控设备建立通信连接。
S1002:所述主控设备向所述电子设备发送UI信息,所述电子设备接收所述UI信息。其中,所述UI信息对应的UI中至少包括第一功能选项(如组件),所述第一功能选项关联至少一个用户操作类型(如单击、双击等)。
举例来说,当主控设备检测到与电子设备建立通信连接时,主控设备中的UI解析引擎可以将主控设备的UI(即UI代码)描述生成DSL,并发送到电子设备上。具体实现可以参照上述智能开关向电子设备发送UI信息的实现,不再进行赘述。
S1003:所述电子设备响应于所述UI信息,显示对应的UI。
在一些实施中,电子设备接收到来自主控设备的UI信息后,可以先基于该UI信息构建view树。具体而言,构建view树时,电子设备可以考虑不同的view之间的位置关系,其中view树中每个view表示UI中的一个功能选项或背景,背景对应的view也可以用viewroot表示。如图11所示,view1对应图层1,view2对应图层2,view3对应图层3。view1、view2、view3都位于viewroot上,则view1、view2、view3可以作为viewroot的子节点。且view1、view2、view3所在的位置没有重叠,则view1、view2、view3可作为同一层。电子设备根据view树的布局,对view树的各个节点(view)依次来渲染,即可得到一个UI。
S1004:所述电子设备响应于基于所述UI中所述第一功能选项的第一用户操作,向所述主控设备发送用户操作信息,所述主控设备接收所述用户操作信息。
其中,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型,所述第一用户操作的类型属于所述第一功能选项关联的(或支持的)用户操作类型。
作为一种示例,当用户对UI中的第一功能选项进行第一用户操作时(如单击操作),如果该第一用户操作的类型属于第一功能选项关联的用户操作类型,则电子设备可以将该第一功能选项的标识信息和用户的第一用户操作的类型描述生成DSL,发送至主控设备。
在一些可能的实施中,第一用户操作还可能是文本输入操作、语音输入操作,所述用户操作信息还包括电子设备基于所述第一用户操作获取到的用户输入信息。
作为一种示例,以第一功能选项为文本框、用户进行文本输入操作为例,电子设备向主控设备发送的用户操作信息中还可以包括用户在文本框中输入的信息。
S1005:所述主控设备执行与所述操作信息所对应的控制操作或管理操作。
主控设备接收到操作信息后,可以调用对第一功能选项进行所述用户操作对应的处理函数,执行与对第一功能选项执行所述第一用户操作所对应的指令,进行与所述操作信息所对应的控制操作或管理操作。
S1006:所述主控设备向所述电子设备发送UI更新信息,所述电子设备接收所述UI信息。
其中,所述UI更新信息中至少包括所述主控设备执行与所述用户操作信息对应的控制操作或管理操作后所述UI的变化信息。
需要理解的是,在UI更新信息中可以仅包括主控设备执行用户操作信息对应的控制操作或管理操作后UI的变化信息,如第一功能选项更新后的属性信息,还可以包括主控设备执行用户操作信息对应的控制操作或管理操作后新UI的整体信息,本申请对此不作限定。
S1007:所述电子设备响应于所述UI更新信息,更新所述UI。
作为一种示例,参照图7和图8,当用户单击显示的样式为“按钮”的功能选项时,电子设备将该功能选项的标识信息和单击操作的信息转换成DSL,发送至智能开关(即主控设备)。智能开关接收到该DSL后,解析该DSL,并调用对样式为“按钮”的功能选项进行单击操作对应的处理函数,执行对样式为“按钮”的功能选项进行单击操作所对应的打开指令,将智能开关打开,并将样式为“按钮”的功能选项的属性更新为“已打开”,并将包含将样式为“按钮”的功能选项的属性更新为“已打开”的UI更新信息转换为DSL,发送给电子设备。电子设备根据接收到的DSL,将UI中样式为“按钮”的功能选项的属性由“已关闭”更新为“已打开”。
上述本申请提供的实施例中,从电子设备和主控设备作为执行主体的角度对本申请实施例提供的方法进行了介绍。为了实现上述本申请实施例提供的方法中的各功能,电子设备或主控设备可以包括硬件结构和/或软件模块,以硬件结构、软件模块、或硬件结构加软件模块的形式来实现上述各功能。上述各功能中的某个功能以硬件结构、软件模块、还是硬件结构加软件模块的方式来执行,取决于技术方案的特定应用和设计约束条件。
下面结合附图介绍本申请实施例提供的装置,以实现本申请上述方法实施例。
本申请实施例还提供了一种电子设备,如图12所示,包括一个或多个处理器1201、一个或多个存储器1202。存储器1202中存储有一个或多个计算机程序,当该一个或多个计算机程序被处理器1201执行时,使得电子设备执行本申请实施例提供的跨设备交互方法。
该电子设备还可以包括显示屏1205,用于显示图形用户界面,例如媒体应用的界面。示例的,显示屏1205包括显示面板。显示面板可以采用液晶显示屏(liquid crystaldisplay,LCD),有机发光二极管(organic light-emitting diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,AMOLED),柔性发光二极管(flex light-emitting diode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot light emitting diodes,QLED)等。
进一步的,在一些实施例中,该电子设备还可以包括摄像头1203和麦克风1204。
此外,本申请实施例中的电子设备还可以包括扬声器、触摸传感器等,本申请实施例对此不作限定。
本申请实施例还提供了一种主控设备,如图13所示,包括一个或多个处理器1301、一个或多个存储器1302。存储器1302中存储有一个或多个计算机程序,当该一个或多个计算机程序被处理器1301执行时,使得主控设备执行本申请实施例提供的跨设备交互方法。
进一步的,在一些实施例中,该主控设备还可以包括摄像头1303、麦克风1304和显示屏1305。
此外,本申请实施例中的主控设备还可以包括扬声器、触摸传感器等,本申请实施例对此不作限定。
本申请实施例中不限定上述处理器、存储器、摄像头、麦克风和显示屏之间的连接介质。例如,本申请实施例中处理器、存储器、摄像头、麦克风和显示屏之间可以通过总线连接,所述总线可以分为地址总线、数据总线、控制总线等。
在本申请实施例中,处理器可以是通用处理器、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
在本申请实施例中,存储器可以是非易失性存储器,比如硬盘(hard disk drive,HDD)或固态硬盘(solid-state drive,SSD)等,还可以是易失性存储器(volatilememory),例如随机存取存储器(random-access memory,RAM)。存储器是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。本申请实施例中的存储器还可以是电路或者其它任意能够实现存储功能的装置,用于存储程序指令和/或数据。
以上实施例中所用,根据上下文,术语“当…时”或“当…后”可以被解释为意思是“如果…”或“在…后”或“响应于确定…”或“响应于检测到…”。类似地,根据上下文,短语“在确定…时”或“如果检测到(所陈述的条件或事件)”可以被解释为意思是“如果确定…”或“响应于确定…”或“在检测到(所陈述的条件或事件)时”或“响应于检测到(所陈述的条件或事件)”。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。在不冲突的情况下,以上各实施例的方案都可以组合使用。
需要指出的是,本专利申请文件的一部分包含受著作权保护的内容。除了对专利局的专利文件或记录的专利文档内容制作副本以外,著作权人保留著作权。
Claims (22)
1.一种跨设备交互方法,其特征在于,包括:
电子设备响应于来自主控设备的用户界面UI信息,显示对应的UI,所述UI中至少包括第一功能选项,所述第一功能选项关联至少一个用户操作类型;
所述电子设备响应于基于所述UI中所述第一功能选项的第一用户操作,向所述主控设备发送用户操作信息,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型,所述用户操作信息用于触发所述主控设备执行与所述用户操作信息对应的控制操作或管理操作。
2.如权利要求1所述的方法,其特征在于,所述用户操作信息还包括基于所述第一用户操作获取到的用户输入信息。
3.如权利要求1或2所述的方法,其特征在于,所述UI信息和所述用户操作信息为特定领域语言DSL格式的信息。
4.如权利要求1-3中任一项所述的方法,其特征在于,所述电子设备响应于来自主控设备的UI信息之前,还包括:
所述电子设备响应于从待连接设备列表中选取所述主控设备的第二用户操作,与所述主控设备建立通信连接。
5.如权利要求1-4中任一项所述的方法,其特征在于,所述电子设备发送用户操作信息之后,还包括:
所述电子设备接收来自所述主控设备的UI更新信息,所述UI更新信息中至少包括所述主控设备执行与所述用户操作信息对应的控制操作或管理操作后所述UI的变化信息;
所述电子设备响应于所述UI更新信息,更新所述UI。
6.一种跨设备交互方法,其特征在于,包括:
主控设备向电子设备发送用户界面UI信息,所述UI信息对应的UI中至少包括第一功能选项,所述第一功能选项关联至少一个用户操作类型;
所述主控设备接收来自所述电子设备的用户操作信息,所述用户操作信息是所述电子设备基于所述UI中所述第一功能选项的第一用户操作获取到的,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型;
所述主控设备执行与所述操作信息所对应的控制操作或管理操作。
7.如权利要求6所述的方法,其特征在于,所述用户操作信息还包括基于所述第一用户操作获取到的用户输入信息。
8.如权利要求6或7所述的方法,其特征在于,所述UI信息和所述用户操作信息为特定领域语言DSL格式的信息。
9.如权利要求6-8中任一项所述的方法,其特征在于,所述主控设备向电子设备发送UI信息,包括:
所述主控设备与所述电子设备建立通信连接后,向所述电子设备发送UI信息。
10.如权利要求6-9任一项所述的方法,其特征在于,所述主控设备执行与所述操作信息所对应的控制操作或管理操作之后,还包括:
所述主控设备向所述电子设备发送UI更新信息,所述UI更新信息中至少包括所述主控设备执行与所述用户操作信息对应的控制操作或管理操作后所述UI的变化信息。
11.一种电子设备,其特征在于,所述电子设备包括:
存储器、处理器和显示屏,其中所述处理器与所述存储器和显示屏连接;
以及一个或多个计算机程序,其中所述一个或多个计算机程序被存储在所述存储器中,所述一个或多个计算机程序包括指令,当所述指令被所述电子设备执行时,使得所述电子设备执行以下步骤:
响应于来自主控设备的用户界面UI信息,显示对应的UI,所述UI中至少包括第一功能选项,所述第一功能选项关联至少一个用户操作类型;
响应于基于所述UI中所述第一功能选项的第一用户操作,向所述主控设备发送用户操作信息,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型,所述用户操作信息用于触发所述主控设备执行与所述用户操作信息对应的控制操作或管理操作。
12.如权利要求11所述的电子设备,其特征在于,所述用户操作信息还包括基于所述第一用户操作获取到的用户输入信息。
13.如权利要求11或12所述的电子设备,其特征在于,所述UI信息和所述用户操作信息为特定领域语言DSL格式的信息。
14.如权利要求11-13中任一项所述的电子设备,其特征在于,当所述指令被所述电子设备执行时,使得所述电子设备响应于来自主控设备的UI信息之前,还执行以下步骤:
响应于从待连接设备列表中选取所述主控设备的第二用户操作,与所述主控设备建立通信连接。
15.如权利要求11-14中任一项所述的电子设备,其特征在于,当所述指令被所述电子设备执行时,使得所述电子设备发送用户操作信息之后,还执行以下步骤:
接收来自所述主控设备的UI更新信息,所述UI更新信息中至少包括所述主控设备执行与所述用户操作信息对应的控制操作或管理操作后所述UI的变化信息;
响应于所述UI更新信息,更新所述UI。
16.一种主控设备,其特征在于,所述主控设备包括:
存储器和处理器,其中所述处理器与所述存储器连接;
以及一个或多个计算机程序,其中所述一个或多个计算机程序被存储在所述存储器中,所述一个或多个计算机程序包括指令,当所述指令被所述主控设备执行时,使得所述主控设备执行以下步骤:
向电子设备发送用户界面UI信息,所述UI信息对应的UI中至少包括第一功能选项,所述第一功能选项关联至少一个用户操作类型;
接收来自所述电子设备的用户操作信息,所述用户操作信息是所述电子设备基于所述UI中所述第一功能选项的第一用户操作获取到的,所述用户操作信息至少包括所述第一功能选项的标识信息和所述第一用户操作的类型;
执行与所述操作信息所对应的控制操作或管理操作。
17.如权利要求16所述的主控设备,其特征在于,所述用户操作信息还包括基于所述第一用户操作获取到的用户输入信息。
18.如权利要求16或17所述的主控设备,其特征在于,所述UI信息和所述用户操作信息为特定领域语言DSL格式的信息。
19.如权利要求16-18中任一项所述的主控设备,其特征在于,所述主控设备执行向电子设备发送UI信息时,具体执行以下步骤:
与所述电子设备建立通信连接后,向所述电子设备发送UI信息。
20.如权利要求16-19中任一项所述的主控设备,其特征在于,当所述指令被所述主控设备执行时,使得所述主控设备执行与所述操作信息所对应的控制操作或管理操作之后,还执行以下步骤:
向所述电子设备发送UI更新信息,所述UI更新信息中至少包括执行与所述用户操作信息对应的控制操作或管理操作后所述UI的变化信息。
21.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行如权利要求1-5中任一项所述的方法,或执行如权利要求6-10中任一项所述的方法。
22.一种芯片,其特征在于,所述芯片与存储器耦合,使得所述芯片在运行时调用所述存储器中存储的计算机程序,实现如权利要求1-5中任一项所述的方法,或实现如权利要求6-10中任一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110400031.6A CN115202546A (zh) | 2021-04-14 | 2021-04-14 | 一种跨设备交互方法及设备 |
PCT/CN2022/085461 WO2022218197A1 (zh) | 2021-04-14 | 2022-04-07 | 一种跨设备交互方法及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110400031.6A CN115202546A (zh) | 2021-04-14 | 2021-04-14 | 一种跨设备交互方法及设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115202546A true CN115202546A (zh) | 2022-10-18 |
Family
ID=83573723
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110400031.6A Pending CN115202546A (zh) | 2021-04-14 | 2021-04-14 | 一种跨设备交互方法及设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN115202546A (zh) |
WO (1) | WO2022218197A1 (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105116734A (zh) * | 2015-06-26 | 2015-12-02 | 青岛海信移动通信技术股份有限公司 | 一种智能家电的控制方法及装置、控制终端 |
CN111523095A (zh) * | 2020-03-31 | 2020-08-11 | 华为技术有限公司 | 一种跨设备交互的方法和终端设备 |
CN111817930A (zh) * | 2020-06-09 | 2020-10-23 | 四川虹美智能科技有限公司 | 设备控制方法、智能家电、智能终端及智能电子设备 |
CN112351412A (zh) * | 2019-08-06 | 2021-02-09 | 华为技术有限公司 | 一种内容接续方法、系统及电子设备 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6089459A (en) * | 1992-06-16 | 2000-07-18 | Smartdiskette Gmbh | Smart diskette device adaptable to receive electronic medium |
CN106375409A (zh) * | 2016-08-31 | 2017-02-01 | 杭州古北电子科技有限公司 | 一种自动生成智能设备控制界面的方法 |
CN111683278A (zh) * | 2020-06-22 | 2020-09-18 | 深圳创维-Rgb电子有限公司 | 智能家电设备远程协助方法、装置和移动终端 |
-
2021
- 2021-04-14 CN CN202110400031.6A patent/CN115202546A/zh active Pending
-
2022
- 2022-04-07 WO PCT/CN2022/085461 patent/WO2022218197A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105116734A (zh) * | 2015-06-26 | 2015-12-02 | 青岛海信移动通信技术股份有限公司 | 一种智能家电的控制方法及装置、控制终端 |
CN112351412A (zh) * | 2019-08-06 | 2021-02-09 | 华为技术有限公司 | 一种内容接续方法、系统及电子设备 |
CN111523095A (zh) * | 2020-03-31 | 2020-08-11 | 华为技术有限公司 | 一种跨设备交互的方法和终端设备 |
CN111817930A (zh) * | 2020-06-09 | 2020-10-23 | 四川虹美智能科技有限公司 | 设备控制方法、智能家电、智能终端及智能电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2022218197A1 (zh) | 2022-10-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020244492A1 (zh) | 一种投屏显示方法及电子设备 | |
US11934352B2 (en) | Card rendering method and electronic device | |
WO2021121052A1 (zh) | 一种多屏协同方法、系统及电子设备 | |
CN113961157B (zh) | 显示交互系统、显示方法及设备 | |
CN114461240B (zh) | 软件升级方法、软件升级系统及电子设备 | |
CN115309431B (zh) | 一种参数更新方法、可读介质和电子设备 | |
CN111556479B (zh) | 信息共享方法及相关装置 | |
WO2022253158A1 (zh) | 一种用户隐私保护方法及装置 | |
EP4213415A1 (en) | Method for detecting video monitoring device, and electronic device | |
WO2021244452A1 (zh) | 一种多设备交互的方法及系统 | |
WO2024001810A1 (zh) | 设备交互方法、电子设备及计算机可读存储介质 | |
CN115022982B (zh) | 多屏协同无感接入方法、电子设备及存储介质 | |
WO2022042765A1 (zh) | 一种显示方法及电子设备 | |
CN115150502B (zh) | 一种应用小部件的显示方法及装置、存储介质 | |
CN115202546A (zh) | 一种跨设备交互方法及设备 | |
CN113886070A (zh) | 设备信息管理方法、装置、设备及计算机可读存储介质 | |
CN116541188B (zh) | 通知显示方法、终端设备及存储介质 | |
CN116679895B (zh) | 一种协同业务的调度方法、电子设备及协同系统 | |
WO2023179682A1 (zh) | 一种设备协同方法 | |
WO2024109481A1 (zh) | 窗口控制方法及电子设备 | |
CN116048594B (zh) | 软件升级方法及相关装置 | |
CN116708063B (zh) | 日志上报方法、电子设备、云服务器及存储介质 | |
WO2023207890A1 (zh) | 一种界面显示方法及电子设备 | |
WO2024131823A1 (zh) | 免安装应用的升级方法及电子设备 | |
WO2023020496A1 (zh) | 一种显示方法、芯片与电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |