CN107273083B

CN107273083B - 一种终端设备之间的交互方法、装置、设备和存储介质

Info

Publication number: CN107273083B
Application number: CN201710527313.6A
Authority: CN
Inventors: 宋晔; 陈聪; 方胜
Original assignee: Beijing Baidu Netcom Science and Technology Co Ltd
Current assignee: Beijing Baidu Netcom Science and Technology Co Ltd
Priority date: 2017-06-30
Filing date: 2017-06-30
Publication date: 2020-05-26
Anticipated expiration: 2037-06-30
Also published as: CN107273083A

Abstract

本发明实施例公开了一种终端设备之间的交互方法、装置、设备和存储介质，该方法包括：本端设备获取对端设备的显示屏幕参数；根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数；根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面；将所述对端用户界面传输给所述对端设备，进行显示。在本发明实施例的技术方案中，通过获取对端设备显示屏幕参数，从而设计专门的用户界面及其布局规则，再投射到对端设备显示，能够使得生成的图像与对端设备的显示屏更加匹配，避免失真和图像扭曲现象发生，提升了用户体验。

Description

一种终端设备之间的交互方法、装置、设备和存储介质

技术领域

本发明实施例涉及数据传输技术领域，尤其涉及一种终端设备之间的交互方法、装置、设备和存储介质。

背景技术

车机是指安装在汽车里面的车载电脑、车载影音系统或车载导航系统等车载信息娱乐产品。随着我国汽车保有量的不断增加，以及手机、平板电脑等移动终端的快速发展，越来越多的厂家投入大量人力和物力在研究车机与移动终端的连接，主要体现在车主通过操控移动终端可以将移动终端界面投射到车机显示屏显示，并且可以借助车机本身的触摸屏和按键对移动终端进行控制，实现了移动终端与车机的互联及互控，方便车主使用自己移动终端上的导航、音乐和电话功能等。

目前，市面上该类产品的技术方案大多是当移动终端与车机成功连接后，通过移动终端获取当前屏幕的图像或应用显示区域的图像，发往车机进行显示；或者是当手机跟车机成功连接后，通过移动终端生成一个虚拟显示器，为虚拟显示器生成图像，并将此虚拟显示器的图像同步至车机进行显示。

然而上述两种方案在实际应用过程中均存在如下几个缺陷：(1)投射的图像为移动终端应用适配移动终端屏幕的结果，其宽高比例和清晰度与车机屏幕不一致，导致在图像投射时，出现图像不完整或者拉伸变形的问题，甚至一旦存在屏幕比例差异过大时，直接无法进行适配；(2)车机的屏幕分辨率一般较低，移动终端依然使用高分辨的配置进行显示，并且需要进行一次缩放，存在性能上的浪费问题；(3)图像的界面布局没有专门适配车机的屏幕特点。

终上所述，现急需研究一种新的基于屏幕投射反控技术的智能终端与车机互联方案以解决上述问题，提升用户体验。

发明内容

本发明实施例提供一种一种终端设备之间的交互方法、装置、设备和存储介质，以实现在终端设备之间进行图像交互时，能够更加适配多个终端设备的屏幕显示特点。

为达到此目的，本发明采用以下技术方案：

第一方面，本发明实施例提供了一种终端设备之间的交互方法，所述方法包括：

本端设备获取对端设备的显示屏幕参数；

根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数；

根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面；

将所述对端用户界面传输给所述对端设备，进行显示。

进一步地，上述方法中，所述显示参数包括：显示分辨率参数和像素密度参数。

进一步地，上述方法中，所述根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面包括：

根据所述虚拟显示器的显示参数，获取所述对端设备的用户界面中插件布局规则；

获取所述本端设备的用户界面中的插件要素及其参数；

按照所述插件布局规则，调整所述插件要素的参数，并生成对端用户界面。

进一步地，上述方法中，所述插件要素包括下述至少一个：状态栏位置和尺寸、信息栏位置和尺寸、按键栏位置和尺寸、图标尺寸和图标间距。

进一步地，上述方法中，所述按照所述插件布局规则，调整所述插件要素的参数，并生成对端用户界面包括：

按照所述插件布局规则，将所述信息栏的位置从顶端调整至侧边；

按照所述插件布局规则，调整所述图标尺寸和图标间距；

生成对端用户界面。

进一步地，上述方法中，所述本端设备为移动终端，所述对端设备为车机。

第二方面，本发明实施例提供了一种终端设备之间的交互装置，所述装置包括：

参数获取模块，用于本端设备获取对端设备的显示屏幕参数；

参数设置模块，用于根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数；

界面生成模块，用于根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面；

界面传输模块，用于将所述对端用户界面传输给所述对端设备，进行显示。

进一步地，上述装置中，所述显示参数包括：显示分辨率参数和像素密度参数。

进一步地，上述装置中，所述界面生成模块包括：

规则获取子模块，用于根据所述虚拟显示器的显示参数，获取所述对端设备的用户界面中插件布局规则；

参数获取子模块，用于获取所述本端设备的用户界面中的插件要素及其参数；

界面生成子模块，用于按照所述插件布局规则，调整所述插件要素的参数，并生成对端用户界面。

进一步地，上述装置中，所述插件要素包括下述至少一个：状态栏位置和尺寸、信息栏位置和尺寸、按键栏位置和尺寸、图标尺寸和图标间距。

进一步地，上述装置中，所述界面生成子模块包括：

第一调整单元，用于按照所述插件布局规则，将所述信息栏的位置从顶端调整至侧边；

第二调整单元，用于按照所述插件布局规则，调整所述图标尺寸和图标间距；

界面生成单元，用于生成对端用户界面。

进一步地，上述装置中，所述本端设备为移动终端，所述对端设备为车机。

第三方面，本发明实施例提供了一种设备，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例所提供的终端设备之间的交互方法。

第四方面，本发明实施例提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如本发明任意实施例所提供的终端设备之间的方法。

本发明实施例提供的技术方案，通过获取对端设备显示屏幕参数，从而设计专门的用户界面及其布局规则，再投射到对端设备显示，能够使得生成的图像与对端设备的显示屏更加匹配，避免失真和图像扭曲现象发生，提升了用户体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例一提供的一种终端设备之间的交互方法的流程示意图；

图2为本发明实施例二提供的一种终端设备之间的交互方法的流程示意图；

图3为本发明实施例三提供的一种终端设备之间的交互装置的结构示意图；

图4为本发明实施例四提供的一种设备的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。在不冲突的情况下，本发明实施例以及实施例中的特征可以相互组合。

实施例一

图1为本发明实施例一提供的一种终端设备之间的交互方法的流程示意图，该方法优选适用于手机与车机互联，进行屏幕投射和反控的应用场景，该方法可以由终端设备之间的交互装置来执行，该装置可以由软件和/或硬件实现，并一般可集成于手机等智能终端设备中。参见图1，该方法包括：

S110、本端设备获取对端设备的显示屏幕参数。

当本端设备内的客户端检测到本端设备与对端设备建立连接后，本端设备将直接获取对端设备的显示屏幕参数；具体的，可通过生成查询指令的方式，从对端设备的系统配置属性中获取对端设备的显示屏的显示屏幕参数，包括分辨率参数和像素密度参数。

在本发明实施例中，本端设备获取对端设备的显示屏幕参数，一方面可以是在本端设备与对端设备第一次连接时获取，本端设备会保留与对端设备的连接历史数据，以便本端设备再次与已连接过的对端设备连接时，可以直接从连接历史数据中获取对端设备的显示屏幕参数；另一方面也可以是在每次本端设备与对端设备连接时获取。

需要说明的是，本端设备与对端设备的连接，一方面可以是通过USB接口的有线连接，只需本端设备在用户界面上确认管理权限，本端设备便可通过数据线与对端设备实现数据的交互；另一方面还可以是通过WiFi等无线局域网络的无线连接，只需确保本端设备和对端设备连在同一WiFi环境下即可，示例性的，本端设备通过启用蜂窝移动数据，开启个人热点，而对端设备开启WiFi功能，搜索并连接该热点，便可实现互联。当然，通过在对端设备内设置网络模块的方式建立无线局域网络也是可行的。

S120、根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数。

其中，本端设备的虚拟显示器是在本端设备与对端设备建立连接后生成的。该虚拟显示器建立后，将本端设备的用户界面上所需显示的应用图像投射到虚拟显示器中，生成适合该虚拟显示器显示的图像数据。该虚拟显示器的显示参数可以自定义设置。本发明实施例中根据对端设备的显示屏参数设置该虚拟显示器的显示参数，用于对应对端设备的显示屏。

优选的，所述显示参数包括：显示分辨率参数和像素密度参数。

所述显示分辨率参数对应的是显示屏的宽高比，所述像素密度参数对应的是显示屏的清晰度。

S130、根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面。

对本端设备的用户界面中插件要素的参数的调整是本端设备将其用户界面根据对端设备的显示参数重新进行布局设计的过程。

在本发明实施例中，本端设备将其用户界面中显示的插件要素的参数调整成适合对端设备的显示屏的输出数据，通过有线或无线的传输方式传输给对端设备中显示。其中，本端设备在对用户界面编码转换时，需要参考对端设备显示屏的参数，保证对端设备接收到该输出数据后可以直接解码显示。由于本端设备不具有真实的与车机相同的显示屏，所以需要通过在本端设备内部建立一个虚拟显示器以提供本端设备编码时的参考标准，该虚拟显示器的显示参数设置为与对端设备的显示屏参数一致。

通过根据虚拟显示器中对应于对端设备显示屏宽高比和清晰度的显示参数，对本端设备的用户界面中所需显示的整个应用图像(包括插件要素)进行参数更新，生成的图像数据适合该虚拟显示器显示，即适合对端设备的显示屏显示，而运行中的插件功能,如歌曲播放状态，导航状态等不受影响。

优选的，所述插件要素包括下述至少一个：状态栏位置和尺寸、信息栏位置和尺寸、按键栏位置和尺寸、图标尺寸、图标间距、图标形状、图标内容图案等,还可以包括各种功能窗口的插件,如音乐播放窗口、时间窗口等。

需要说明的是，上述插件要素在用户界面表现为可视化图形“元件”，比如是按钮、编辑框、选项框等。其中大多数插件要素是具有执行功能或通过“事件”引发代码运行并完成响应的功能。

S140、将所述对端用户界面传输给所述对端设备，进行显示。

将对端用户界面进行编码处理后，通过有线或无线的方式同步到对端设备，由对端设备接收后显示，无需额外缩放。

优选的，本发明实施例中，所述本端设备为移动终端，所述对端设备为车机。

实施例二

如图2所示，本实施例提供的一种终端设备之间的交互方法，是在实施例一提供的技术方案的基础上，对操作“根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面”进一步优化。即：

获取所述本端设备的用户界面中的插件要素及其参数；

基于上述优化，如图2所示，本实施例提供的一种终端设备之间的交互方法，可以包括：

S210、本端设备获取对端设备的显示屏幕参数。

S220、根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数。

S230、根据所述虚拟显示器的显示参数，获取所述对端设备的用户界面中插件布局规则。

在本实施例中，所述虚拟显示器的显示参数包括显示分辨率参数和像素密度参数，指的是屏幕的宽高比和清晰度；所述插件布局规则包括插件要素的位置、尺寸和间距等，指的是插件要素在用户界面上的布局情况。

根据所述虚拟显示器的显示分辨率和像素密度参数，获取对端设备中的用户界面配置，从该用户界面配置中确定所述对端设备的用户界面中插件要素的位置、尺寸和间距等布局情况。

S240、获取所述本端设备的用户界面中的插件要素及其参数。

所述插件要素包括下述至少一个：状态栏位置和尺寸、信息栏位置和尺寸、按键栏位置和尺寸、图标尺寸和图标间距，还可以包括音乐播放窗口好时间窗口；所述插件要素的参数包括位置参数、尺寸参数和间距参数等。

S250、按照所述插件布局规则，调整所述插件要素的参数，并生成对端用户界面。

所述对端用户界面指的是适配于对端设备的显示屏幕大小的用户界面，其包括了显示分辨率参数、像素密度参数和插件要素，其中插件要素需要根据分辨率参数和像素密度参数的改变而调整参数。在本发明实施例中，所述本端设备的插件要素的参数应当符合对端设备的插件布局规则。

优选的，所述按照所述插件布局规则，调整所述插件要素的参数，并生成对端用户界面包括：

按照所述插件布局规则，调整所述图标尺寸和图标间距；

生成对端用户界面。

具体的，根据对端设备的用户界面插件布局规则中的信息栏位置规则，将本端设备用户界面图像中信息栏的位置从顶端调整至侧边，适应横纵屏幕；

根据对端设备的用户界面插件布局规则中的图标尺寸和图标间距规则，将本地界面图像中图标尺寸和图标间距进行调整。

S260、将所述对端用户界面传输给所述对端设备，进行显示。

本发明实施例提供的技术方案，通过根据对端设备的插件布局规则，调整本端设备的插件要素参数，使得生成的对端用户界面与对端设备的显示屏更加匹配，避免失真和图像扭曲现象发生，提升了用户体验。

实施例三

请参阅附图3，为本发明实施例三提供的一种终端设备之间的交互装置的结构示意图，该装置具体包含如下模块：

参数获取模块31，用于本端设备获取对端设备的显示屏幕参数；

参数设置模块32，用于根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数；

界面生成模块33，用于根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面；

界面传输模块34，用于将所述对端用户界面传输给所述对端设备，进行显示。

本发明实施例提供的技术方案，通过本端设备获取对端设备的显示屏幕参数；根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数；根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面；将所述对端用户界面传输给所述对端设备，进行显示，能够使得生成的图像与对端设备的显示屏更加匹配，避免失真和图像扭曲现象发生，提升了用户体验。

优选的，所述界面生成模块包括：

优选的，所述插件要素包括下述至少一个：状态栏位置和尺寸、信息栏位置和尺寸、按键栏位置和尺寸、图标尺寸和图标间距。

优选的，所述界面生成子模块包括：

界面生成单元，用于生成对端用户界面。

优选的，所述本端设备为移动终端，所述对端设备为车机。

上述装置可执行本发明任意实施例所提供的方法，具备执行方法相应的功能模块和有益效果。

实施例四

图4为本发明实施例四提供的一种设备的结构示意图。图4示出了适于用来实现本发明实施方式的示例性设备412的框图。图4显示的设备412仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图4所示，设备412以通用计算设备的形式表现。设备412的组件可以包括但不限于：一个或者多个处理器或者处理单元416，系统存储器428，连接不同系统组件(包括系统存储器428和处理单元416)的总线418。

总线418表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。

设备412典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备412访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

系统存储器428可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)430和/或高速缓存存储器432。设备412可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统434可以用于读写不可移动的、非易失性磁介质(图4未显示，通常称为“硬盘驱动器”)。尽管图4中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线418相连。存储器428可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块442的程序/实用工具440，可以存储在例如存储器428中，这样的程序模块442包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块442通常执行本发明所描述的实施例中的功能和/或方法。

设备412也可以与一个或多个外部设备414(例如键盘、指向设备、显示器424等)通信，还可与一个或者多个使得用户能与该设备412交互的设备通信，和/或与使得该设备412能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口422进行。并且，设备412还可以通过网络适配器420与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器420通过总线418与设备412的其它模块通信。应当明白，尽管图中未示出，可以结合设备412使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

处理单元416通过运行存储在系统存储器428中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的终端设备之间的交互方法。该设备典型的是为智能终端，例如手机。

实施例五

本发明实施例五还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例中任意所述的终端设备之间的交互方法。

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims

1.一种终端设备之间的交互方法，其特征在于，包括：

本端设备获取对端设备的显示屏幕参数；

根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数；其中，所述虚拟显示器的显示参数设置与所述对端设备的显示屏参数一致；

将所述对端用户界面传输给所述对端设备。

2.根据权利要求1所述的交互方法，其特征在于，所述显示参数包括：显示分辨率参数和像素密度参数。

3.根据权利要求1所述的交互方法，其特征在于，所述根据所述虚拟显示器的显示参数，调整所述本端设备的用户界面中插件要素的参数，并生成对端用户界面包括：

获取所述本端设备的用户界面中的插件要素及其参数；

4.根据权利要求3所述的交互方法，其特征在于，所述插件要素包括下述至少一个：状态栏位置和尺寸、信息栏位置和尺寸、按键栏位置和尺寸、图标尺寸和图标间距。

5.根据权利要求4所述的交互方法，其特征在于，所述按照所述插件布局规则，调整所述插件要素的参数，并生成对端用户界面包括：

按照所述插件布局规则，调整所述图标尺寸和图标间距；

生成对端用户界面。

6.根据权利要求1或3所述的交互方法，其特征在于，所述本端设备为移动终端，所述对端设备为车机。

7.一种终端设备之间的交互装置，其特征在于，包括：

参数设置模块，用于根据所述显示屏幕参数，设置所述本端设备的虚拟显示器的显示参数；其中，所述虚拟显示器的显示参数设置与所述对端设备的显示屏参数一致；

界面传输模块，用于将所述对端用户界面传输给所述对端设备。

8.根据权利要求7所述的交互装置，其特征在于，所述界面生成模块包括：

9.一种设备，其特征在于，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-6中任一所述的终端设备之间的交互方法。

10.一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-6中任一所述的终端设备之间的方法。