CN105549821A - 移动设备与车机的互联方法、装置和系统 - Google Patents

移动设备与车机的互联方法、装置和系统 Download PDF

Info

Publication number
CN105549821A
CN105549821A CN201510962131.2A CN201510962131A CN105549821A CN 105549821 A CN105549821 A CN 105549821A CN 201510962131 A CN201510962131 A CN 201510962131A CN 105549821 A CN105549821 A CN 105549821A
Authority
CN
China
Prior art keywords
mobile device
car machine
coordinate
application program
current page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510962131.2A
Other languages
English (en)
Inventor
董俊龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Neusoft Corp
Original Assignee
Neusoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Neusoft Corp filed Critical Neusoft Corp
Priority to CN201510962131.2A priority Critical patent/CN105549821A/zh
Publication of CN105549821A publication Critical patent/CN105549821A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay

Abstract

本发明提出一种移动设备与车机的互联方法、装置和系统,该移动设备与车机的互联方法包括:对移动设备应用程序的当前页面的每一层进行截图,对截图得到的图片进行图片合成,以及,将合成的图片转换为屏幕数据,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;接收移动设备应用程序发送的屏幕数据,并将所述屏幕数据转换为移动设备与车机之间的通讯数据,以及,将所述通讯数据发送给车机,以使所述车机根据所述通讯数据显示所述当前页面。该方法能够有效的实现移动设备与车机的互联,并且,可以适用于移动设备处于黑屏状态的场景。

Description

移动设备与车机的互联方法、装置和系统
技术领域
本发明涉及移动互联技术领域,尤其涉及一种移动设备与车机的互联方法、装置和系统。
背景技术
随着移动网络、智能移动设备的快速普及、以及应用程序(APP)越来越丰富和个性化,移动设备与车机互联,逐渐成为汽车电子领域的热点技术。移动设备与车机互联,移动设备应用程序可以延伸到车机,势必为行车生活带来更多的便利,同时降低了车机厂商本身的开发成本。目前存在一些移动设备与车机的互联方案,但目前方案都存在一定问题,例如需要保持移动设备处于常亮状态。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本发明的一个目的在于提出一种移动设备与车机的互联方法,该方法可以有效的实现移动设备与车机的互联,并且,可以适用于移动设备处于黑屏状态的场景。
本发明的另一个目的在于提出一种移动设备与车机的互联装置。
本发明的另一个目的在于提出一种移动设备与车机的互联系统。
为达到上述目的,本发明第一方面实施例提出的移动设备与车机的互联方法,包括:对移动设备应用程序的当前页面的每一层进行截图,对截图得到的图片进行图片合成,以及,将合成的图片转换为屏幕数据,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;接收移动设备应用程序发送的屏幕数据,并将所述屏幕数据转换为移动设备与车机之间的通讯数据,以及,将所述通讯数据发送给车机,以使所述车机根据所述通讯数据显示所述当前页面。
本发明第一方面实施例提出的移动设备与车机的互联方法,通过对应用程序的当前页面的每一层进行截图,以及进行图片合成和数据转换,可以将移动设备的应用程序的相关数据发送给车机并在车机上显示,从而实现移动设备与车机的有效互联,且通过对应用程序当前页面的每一层进行截图,由于是对应用程序进行的处理,因此不论移动设备在亮屏或黑屏时依然能够获取到当前页面的内容并传输给车机进行显示,从而适用于移动设备黑屏的场景。
为达到上述目的,本发明第二方面实施例提出的移动设备与车机的互联方法,包括:接收移动设备发送的通讯数据,以及,解析所述通讯数据,得到所述应用程序的屏幕数据,所述通讯数据是所述移动设备根据移动设备应用程序的屏幕数据转换得到,所述屏幕数据是对合成的图片转换得到,所述合成的图片是对所述应用程序的当前页面的每一层进行截图并对截图得到的图片进行图片合成得到,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;根据所述屏幕数据进行渲染;在车机屏幕上显示渲染得到的所述应用程序的当前页面。
本发明第二方面实施例提出的移动设备与车机的互联方法,通过接收移动设备发送的数据,并根据该数据在车机上显示移动设备应用程序的当前页面,可以有效实现移动设备与车机的互联,且通过对应用程序当前页面的每一层进行截图,由于是对应用程序进行的处理,因此不论移动设备在亮屏或黑屏时依然能够获取到当前页面的内容并传输给车机进行显示,从而适用于移动设备黑屏的场景。
为达到上述目的,本发明第三方面实施例提出的移动设备与车机的互联装置,包括:应用模块,用于对移动设备应用程序的当前页面的每一层进行截图,对截图得到的图片进行图片合成,以及,将合成的图片转换为屏幕数据,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;服务模块,用于接收移动设备应用程序发送的屏幕数据,并将所述屏幕数据转换为移动设备与车机之间的通讯数据,以及,将所述通讯数据发送给车机,以使所述车机根据所述通讯数据显示所述当前页面。
本发明第三方面实施例提出的移动设备与车机的互联装置,通过对应用程序的当前页面的每一层进行截图,以及进行图片合成和数据转换,可以将移动设备的应用程序的相关数据发送给车机并在车机上显示,从而实现移动设备与车机的有效互联,且通过对应用程序当前页面的每一层进行截图,由于是对应用程序进行的处理,因此不论移动设备在亮屏或黑屏时依然能够获取到当前页面的内容并传输给车机进行显示,从而适用于移动设备黑屏的场景。
为达到上述目的,本发明第四方面实施例提出的移动设备与车机的互联装置,包括:解析模块,用于接收移动设备发送的通讯数据,以及,解析所述通讯数据,得到所述应用程序的屏幕数据,所述通讯数据是所述移动设备根据移动设备应用程序的屏幕数据转换得到,所述屏幕数据是对合成的图片转换得到,所述合成的图片是对所述应用程序的当前页面的每一层进行截图并对截图得到的图片进行图片合成得到,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;渲染模块,用于根据所述屏幕数据进行渲染;显示模块,用于在车机屏幕上显示渲染得到的所述应用程序的当前页面。
本发明第四方面实施例提出的移动设备与车机的互联装置,通过接收移动设备发送的数据,并根据该数据在车机上显示移动设备应用程序的当前页面,可以有效实现移动设备与车机的互联,且通过对应用程序当前页面的每一层进行截图,由于是对应用程序进行的处理,因此不论移动设备在亮屏或黑屏时依然能够获取到当前页面的内容并传输给车机进行显示,从而适用于移动设备黑屏的场景。
为达到上述目的,本发明第五方面实施例提出的移动设备与车机的互联系统,包括:如本发明第三方面实施例提出的装置,以及,如本发明第四方面实施例提出的装置。
本发明第五方面实施例提出的移动设备与车机的互联系统,通过在移动设备侧进行分层截图和图片合成以及数据转换,在车机侧接收移动设备发送的数据并在车机上显示移动设备应用程序的当前页面,可以有效的实现移动设备与车机的互联,且通过对应用程序当前页面的每一层进行截图,由于是对应用程序进行的处理,因此不论移动设备在亮屏或黑屏时依然能够获取到当前页面的内容并传输给车机进行显示,从而适用于移动设备黑屏的场景。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明一实施例提出的移动设备与车机的互联方法的流程示意图;
图2是本发明实施例中分层截图及图片合成的示意图;
图3是本发明实施例中手机与车机的互联示意图;
图4是本发明另一实施例提出的移动设备与车机的互联方法的流程示意图;
图5是本发明实施例中手机和车机的显示页面示意图;
图6是本发明实施例中车机向手机的操作回控的流程示意图;
图7是本发明另一实施例提出的移动设备与车机的互联装置的结构示意图;
图8是本发明另一实施例提出的移动设备与车机的互联装置的结构示意图;
图9是本发明另一实施例提出的移动设备与车机的互联装置的结构示意图;
图10是本发明另一实施例提出的移动设备与车机的互联系统的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的模块或具有相同或类似功能的模块。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
图1是本发明一实施例提出的移动设备与车机的互联方法的流程示意图,该方法包括:
S11:对移动设备应用程序的当前页面的每一层进行截图,对截图得到的图片进行合成,以及,将合成的图片转换为屏幕数据,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式。
例如,对应每个要在车机的屏幕上显示的移动设备应用程序,可以在该应用程序中预先嵌入代码,该应用程序在启动后,该代码可以运行,并对该应用程序的当前页面的每一层进行截图。
当前页面是指当前时刻该应用程序显示的页面。
车机是安装在汽车里面的车载信息娱乐产品的简称,车机在功能上要能够实现人与车,车与外界(如车与车)的信息通讯。
本申请中将以移动设备是手机、操作系统是安卓(Android)为例,可以理解的是,本申请的方法也可以应用到其他的移动设备,对于其他操作系统,可以类似本申请的方法采用其他操作系统的相应协议实现。
手机APP的每个页面由页面构成组件(activity)实现,每个页面构成组件包括多个视图控件(view),从而每个页面由多个视图控件组成。
由于各个视图控件获取屏幕截图数据方式不同,以及不同视图控件之间的显示层级关系,导致无法一次获取整个屏幕数据。
一些实施例中,通过对安卓的视图控件进行分类,将组成当前页面的视图控件分为多个层,对每层分别进行截图,再对截图进行合成和数据转换,得到屏幕数据。
在对视图控件分层时,可以将具有相同截图获取方式的多个视图控件分为同一个层。
对每层进行截图时,可以采用androidSDK提供的应用程序程序编程接口(ApplicationProgrammingInterface,API)实现。androidSDK提供了不同截图获取方式分别对应的API,对应每层,可以先确定该层具有的截图获取方式,再调用相应的API进行截图。
一些实施例中,可以将当前页面的多个view分成三层:动态描画层,如GLsurfaceView、canvas等;静态控件层,如常用的layout、button、imageView等;弹出层,如dialogs。其中,每层中的视图控件具有相同的截图获取方式。
如图2所示,可以对当前页面的每一层进行截图,并进行图片合成。
可以理解的是,实际情况下有些页面可能不包括上述三层的所有层,此时,可以对页面包括的层进行截图以及合成。例如,当前页面仅包括:静态控件层和弹出层,不包括动态描画层,则可以分别对静态控件层和弹出层进行截图,以及将截图得到的图片进行合成。
在合成时,可以根据页面组成中各层之间的相互关系进行相应合成。
在得到合成图片后,可以将其转化为数据,该数据可以称为屏幕数据。
另外,该屏幕数据要发送给服务APP,因此,可以根据手机APP与服务APP之间的传输方式,在将合成图片转换为屏幕数据时,转换为传输支持的格式。
S12:接收移动设备应用程序发送的屏幕数据,并将所述屏幕数据转换为移动设备与车机之间的通讯数据,以及,将所述通讯数据发送给车机,以使所述车机根据所述通讯数据显示所述当前页面。
对应一个手机APP生成屏幕数据后,该手机APP可以将屏幕数据发送给服务APP。
服务APP是用户预先安装在手机上的,负责手机与车机之间的通信。
如图3所示,手机上可以安装多个手机APP,分别用APP1、APP2、…、APPn表示,另外,手机上还安装服务APP,服务APP负责与车机通讯。
一些实施例中,手机APP可以通过Android接口定义语言(AndroidInterfaceDefinitionLanguage,AIDL)将屏幕数据发送给服务APP。
为使应用程序之间能够彼此通信,Android提供了进程间通信(InterProcessCommunication,IPC)的一种独特实现:AIDL。
其中,每个手机APP可以通过AIDL将屏幕数据发送给服务APP。另外,对于服务APP返回给手机APP的数据,可以在服务APP中注册应用程序管理列表,每个手机APP的包名作为其ID,注册到该管理列表中,服务APP通过手机APP的ID进行消息的分发处理。
AIDL实现流程可以包括:定义一个AIDL接口,为远程服务(Service)实现对应存根(Stub)、将服务提供给客户程序使用。
服务APP接收到手机APP发送的屏幕数据后,可以根据与车机之间的传输协议的要求,进行消息分类和封装等流程,将屏幕数据转换为移动设备与车机之间的通讯数据。
服务APP得到与车机之间的通讯数据后,可以将该通讯数据发送给车机。
一些实施例中,服务APP与车机可以通过Android开放配件协议(AndroidOpenAccessoryProtocol,AOA)建立连接,并通过该连接传输数据。
参见图3,手机与车机通过通用串行总线(UniversalSerialBUS,USB)连接。Android系统支持多种USB外围设备。根据Android设备在USB通信中充当的角色,可以将AndroidUSB通信分为主机模式(HostMode)和配件模式(AccessoryMode)两种模式。本发明采用的配件模式是指Android设备充当USB从机,外部设备充当主机并为总线供电。当手机与车机通过USB连接之后,二者通过、AOA协议建立连接并传输数据。
为了通过AOA协议建立连接并传输数据,需要满足如下条件:
确保设备支持AOA协议。设备对AOA协议是否支持由设备硬件和Android系统版本决定;
调用SDK中的API开发USB应用程序。涉及相关的两个类是UsbManager和UsbAccessory。UsbManager用于枚举连接的USB配件并与其通信,UsbAccessory代表Android配件并包含获取配件描述信息的方法;
配置AndroidMainfest文件,声明使用配件模式,指定最低SDK版本,并设置配件过滤意图;
配置accessory_filter.xml文件。
在服务APP与车机通过AOA协议建立连接后,服务APP可以向车机发送通讯数据。
车机接收到通讯数据后,可以根据通讯数据显示手机APP的当前页面。
上述以手机侧的执行流程为例,参见图4,车机侧的执行流程可以包括:
S41:接收移动设备发送的通讯数据,以及,解析所述通讯数据,得到所述应用程序的屏幕数据,所述通讯数据是所述移动设备根据移动设备应用程序的屏幕数据转换得到,所述屏幕数据是对合成的图片转换得到,所述合成的图片是对所述应用程序的当前页面的每一层进行截图并对截图得到的图片进行图片合成得到,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式。
其中,车机与手机通过USB连接后,可以通过AOA协议建立连接,并接收手机发送的通讯数据。
通讯数据的具体生成流程可以参见上述相关描述。
例如,参见图3,在车机侧,由手机数据解析模块解析通讯数据,得到应用程序的屏幕数据。
S42:根据所述屏幕数据进行渲染。
例如,参见图3,手机数据解析模块将屏幕数据交给渲染模块,由渲染模块根据屏幕数据进行渲染,渲染模块例如为OpenGL数据描画模块。
S43:在车机屏幕上显示渲染得到的所述应用程序的当前页面。
例如,参见图3,OpenGL数据描画模块将渲染得到的手机APP的当前页面显示在人机界面(HumanMachineInterface,HMI)上。
例如,参见图5,手机和车机上可以显示相同的APP的当前页面。
另外,数据不仅可以从手机传输给车机,用户还可以在车机上进行控制,以控制手机APP执行相应流程。
参见图6,车机向手机的操作回控的流程可以包括:
S61:车机获取用户在车机屏幕上产生的点击事件的坐标。
例如,车机内可以设置传感器等设备,从而可以检测到用户的点击事件并获取相应的坐标。
S62:车机根据手机的屏幕大小和车机的屏幕大小,进行坐标转换,得到与点击事件在车机上的坐标对应的手机上的坐标。
例如,手机与车机通讯时,手机可以将手机的屏幕大小通知给车机,从而车机可以获取手机的屏幕大小,并且车机可以获知自身的屏幕大小,根据这两个屏幕大小可以进行坐标转换,将车机上的坐标转换为手机上的坐标。
S63:车机将转换后的坐标发送给手机。
例如,通过AOA连接发送给手机上的服务APP。
S64:服务APP进行事件分发,将转换后的坐标发送给对应的手机APP。
例如,服务APP会记录当前打开的手机APP的ID,根据该ID向相应的手机APP发送坐标。
S65:手机APP根据转换后的坐标进行事件响应。
例如,手机APP接收到服务APP发送的坐标后,执行与坐标对应的功能,例如,坐标对应音乐播放功能,则播放音乐。
用户在车机屏幕上的操作通过以上介绍的通信链路反向传输到手机app,执行事件响应,手机侧通过AndroidSDK中MotionEvent类进行事件模拟响应。
本实施例中,通过对移动设备应用程序的当前页面进行分层处理,可以有效截取APP窗口图像,解决了单一接口无法完整获取屏幕数据的问题,另外,通过对应用程序的截图处理,可以在移动设备不论亮屏或黑屏时,都可以获取到应用程序的当前页面的内容,从而适用于移动设备的黑屏场景。在适用于黑屏场景时,可以保持移动设备处于黑屏状态,相对于亮屏状态,可以降低移动设备的电量开销。进一步的,可以基于AndroidSDK进行开发,实用性以及适用性强,有效降低开发成本以及适配难度。进一步的,基于Android进程间通信技术以及设备间AOA通信技术,为车机与手机的屏幕共享提供通道支撑。进一步的,通过用户在车机屏幕上产生点击事件,以及移动设备根据点击事件在应用程序内进行事件响应,可以使得用户在车机上操作控制移动设备上的应用程序,相对于在移动设备上操作,可以方便用户操作。
图7是本发明另一实施例提出的移动设备与车机的互联装置的结构示意图,该装置70包括:应用模块71和服务模块72。
应用模块71,用于对移动设备应用程序的当前页面的每一层进行截图,对截图得到的图片进行图片合成,以及,将合成的图片转换为屏幕数据,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式。
一些实施例中,可以将当前页面的多个view分成三层:动态描画层,如GLsurfaceView、canvas等;静态控件层,如常用的layout、button、imageView等;弹出层,如dialogs。
服务模块72,用于接收移动设备应用程序发送的屏幕数据,并将所述屏幕数据转换为移动设备与车机之间的通讯数据,以及,将所述通讯数据发送给车机,以使所述车机根据所述通讯数据显示所述当前页面。
可选的,所述服务模块72用于接收移动设备应用程序发送的屏幕数据,包括:
接收移动设备应用程序通过AIDL发送的屏幕数据。
可选的,所述服务模块用于将所述通讯数据发送给车机,包括:
在移动设备与车机通过USB连接后,与车机通过AOA协议建立连接;
通过所述连接,将所述通讯数据发送给车机。
一些实施例中,所述服务模块72还用于:接收车机发送的转换后的坐标,所述转换后的坐标是车机对用户在车机上的点击事件的坐标进行转换后得到;以及,将所述转换后的坐标发送给对应的移动设备应用程序;所述应用模块61还用于:根据所述转换后的坐标进行事件响应。
上述模块的具体内容可以参见方法实施例中的相关描述,在此不再赘述。
本实施例中,通过对应用程序的当前页面的每一层进行截图,以及进行图片合成和数据转换,可以将移动设备的应用程序的相关数据发送给车机并在车机上显示,从而实现移动设备与车机的有效互联。另外,通过对应用程序的截图处理,可以在移动设备不论亮屏或黑屏时,都可以获取到应用程序的当前页面的内容,从而适用于移动设备的黑屏场景。在适用于黑屏场景时,可以保持移动设备处于黑屏状态,相对于亮屏状态,可以降低移动设备的电量开销。另外,通过用户在车机屏幕上产生点击事件,以及移动设备根据点击事件在应用程序内进行事件响应,可以使得用户在车机上操作控制移动设备上的应用程序,相对于在移动设备上操作,可以方便用户操作。
图8是本发明另一实施例提出的移动设备与车机的互联装置的结构示意图,该装置80包括:解析模块81、渲染模块82和显示模块83。
解析模块81,用于接收移动设备发送的通讯数据,以及,解析所述通讯数据,得到所述应用程序的屏幕数据,所述通讯数据是所述移动设备根据移动设备应用程序的屏幕数据转换得到,所述屏幕数据是对合成的图片转换得到,所述合成的图片是对所述应用程序的当前页面的每一层进行截图并对截图得到的图片进行图片合成得到,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;
渲染模块82,用于根据所述屏幕数据进行渲染;
显示模块83,用于在车机屏幕上显示渲染得到的所述应用程序的当前页面。
一些实施例中,参见图9,该装置80还包括:
获取模块84,用于获取用户在车机屏幕上产生的点击事件的坐标;
转换模块85,用于根据移动设备的屏幕大小和车机的屏幕大小,进行坐标转换,得到与点击事件在车机上的坐标对应的移动设备上的坐标;
发送模块86,用于将转换后的坐标发送给移动设备,以使所述移动设备根据所述转换后的坐标进行事件响应。
上述模块的具体内容可以参见方法实施例中的相关描述,在此不再赘述。
本实施例中,通过接收移动设备发送的数据,并根据该数据在车机上显示移动设备应用程序的当前页面,可以有效实现移动设备与车机的互联。另外,通过对应用程序的截图处理,可以在移动设备不论亮屏或黑屏时,都可以获取到应用程序的当前页面的内容,从而适用于移动设备的黑屏场景。在适用于黑屏场景时,可以保持移动设备处于黑屏状态,相对于亮屏状态,可以降低移动设备的电量开销。另外,通过用户在车机上操作控制移动设备上的应用程序响应,可以方便用户操作。
图10是本发明另一实施例提出的移动设备与车机的互联系统的结构示意图,该系统100包括:移动设备端装置101和车机端装置102。
其中,移动设备端装置101可以如图7所示,车机端装置102可以如图8或图9所示。具体内容可以参见上述相关描述,在此不再赘述。
本实施例中,通过在移动设备侧进行分层截图和图片合成以及数据转换,在车机侧接收移动设备发送的数据并在车机上显示移动设备应用程序的当前页面,可以有效的实现移动设备与车机的互联,且通过对应用程序当前页面的每一层进行截图,由于是对应用程序进行的处理,因此不论移动设备在亮屏或黑屏时依然能够获取到当前页面的内容并传输给车机进行显示,从而适用于移动设备黑屏的场景,降低电量开销。另外,通过移动设备上的应用程序响应车机上用户的点击事件,可以实现用户在车机上对移动设备上的应用程序的控制,方便用户操作。
需要说明的是,在本发明的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本发明的描述中,除非另有说明,“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (13)

1.一种移动设备与车机的互联方法,其特征在于,包括:
对移动设备应用程序的当前页面的每一层进行截图,对截图得到的图片进行图片合成,以及,将合成的图片转换为屏幕数据,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;
接收移动设备应用程序发送的屏幕数据,并将所述屏幕数据转换为移动设备与车机之间的通讯数据,以及,将所述通讯数据发送给车机,以使所述车机根据所述通讯数据显示所述当前页面。
2.根据权利要求1所述的方法,其特征在于,所述当前页面包括如下层中的一层或多层:
动态描画层、静态控件层和弹出层。
3.根据权利要求1所述的方法,其特征在于,所述接收移动设备应用程序发送的屏幕数据,包括:
接收移动设备应用程序通过AIDL发送的屏幕数据。
4.根据权利要求1所述的方法,其特征在于,所述将所述通讯数据发送给车机,包括:
在移动设备与车机通过USB连接后,与车机通过AOA协议建立连接;
通过所述连接,将所述通讯数据发送给车机。
5.根据权利要求1-4任一项所述的方法,其特征在于,还包括:
接收车机发送的转换后的坐标,所述转换后的坐标是车机对用户在车机上的点击事件的坐标进行转换后得到;
将所述转换后的坐标发送给对应的移动设备应用程序;
移动设备应用程序根据所述转换后的坐标进行事件响应。
6.一种移动设备与车机的互联方法,其特征在于,包括:
接收移动设备发送的通讯数据,以及,解析所述通讯数据,得到所述应用程序的屏幕数据,所述通讯数据是所述移动设备根据移动设备应用程序的屏幕数据转换得到,所述屏幕数据是对合成的图片转换得到,所述合成的图片是对所述应用程序的当前页面的每一层进行截图并对截图得到的图片进行图片合成得到,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;
根据所述屏幕数据进行渲染;
在车机屏幕上显示渲染得到的所述应用程序的当前页面。
7.根据权利要求6所述的方法,其特征在于,还包括:
获取用户在车机屏幕上产生的点击事件的坐标;
根据移动设备的屏幕大小和车机的屏幕大小,进行坐标转换,得到与点击事件在车机上的坐标对应的移动设备上的坐标;
将转换后的坐标发送给移动设备,以使所述移动设备根据所述转换后的坐标进行事件响应。
8.一种移动设备与车机的互联装置,其特征在于,包括:
应用模块,用于对移动设备应用程序的当前页面的每一层进行截图,对截图得到的图片进行图片合成,以及,将合成的图片转换为屏幕数据,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;
服务模块,用于接收移动设备应用程序发送的屏幕数据,并将所述屏幕数据转换为移动设备与车机之间的通讯数据,以及,将所述通讯数据发送给车机,以使所述车机根据所述通讯数据显示所述当前页面。
9.根据权利要求8所述的装置,其特征在于,所述应用模块处理的所述当前页面包括如下层中的一层或多层:
动态描画层、静态控件层和弹出层。
10.根据权利要求8-9任一项所述的装置,其特征在于,
所述服务模块还用于:接收车机发送的转换后的坐标,所述转换后的坐标是车机对用户在车机上的点击事件的坐标进行转换后得到;以及,将所述转换后的坐标发送给对应的移动设备应用程序;
所述应用模块还用于:根据所述转换后的坐标进行事件响应。
11.一种移动设备与车机的互联装置,其特征在于,包括:
解析模块,用于接收移动设备发送的通讯数据,以及,解析所述通讯数据,得到所述应用程序的屏幕数据,所述通讯数据是所述移动设备根据移动设备应用程序的屏幕数据转换得到,所述屏幕数据是对合成的图片转换得到,所述合成的图片是对所述应用程序的当前页面的每一层进行截图并对截图得到的图片进行图片合成得到,所述每一层是对组成所述当前页面的视图控件进行划分后得到的,同一层的视图控件具有相同的截图获取方式;
渲染模块,用于根据所述屏幕数据进行渲染;
显示模块,用于在车机屏幕上显示渲染得到的所述应用程序的当前页面。
12.根据权利要求11所述的装置,其特征在于,还包括:
获取模块,用于获取用户在车机屏幕上产生的点击事件的坐标;
转换模块,用于根据移动设备的屏幕大小和车机的屏幕大小,进行坐标转换,得到与点击事件在车机上的坐标对应的移动设备上的坐标;
发送模块,用于将转换后的坐标发送给移动设备,以使所述移动设备根据所述转换后的坐标进行事件响应。
13.一种移动设备与车机的互联系统,其特征在于,包括:
如权利要求8-10任一项所述的装置;以及,
如权利要求11或12所述的装置。
CN201510962131.2A 2015-12-18 2015-12-18 移动设备与车机的互联方法、装置和系统 Pending CN105549821A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510962131.2A CN105549821A (zh) 2015-12-18 2015-12-18 移动设备与车机的互联方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510962131.2A CN105549821A (zh) 2015-12-18 2015-12-18 移动设备与车机的互联方法、装置和系统

Publications (1)

Publication Number Publication Date
CN105549821A true CN105549821A (zh) 2016-05-04

Family

ID=55829033

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510962131.2A Pending CN105549821A (zh) 2015-12-18 2015-12-18 移动设备与车机的互联方法、装置和系统

Country Status (1)

Country Link
CN (1) CN105549821A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106970783A (zh) * 2016-09-06 2017-07-21 上海赫千电子科技有限公司 车载主机与电子设备的通信方法
CN107341015A (zh) * 2017-06-30 2017-11-10 百度在线网络技术(北京)有限公司 终端间数据同步方法、装置、终端及存储介质
CN107783930A (zh) * 2016-08-29 2018-03-09 现代自动车株式会社 用于usb附件的usb通信控制方法
CN108255398A (zh) * 2016-12-29 2018-07-06 乐视汽车(北京)有限公司 用于控制移动设备的方法、移动设备和通信系统
CN109857309A (zh) * 2019-01-21 2019-06-07 武汉卡比特信息有限公司 一种基于iOS移动终端的屏幕截图投射方法
CN110248022A (zh) * 2019-06-06 2019-09-17 武汉卡比特信息有限公司 一种基于手机互联的三方应用的投屏方法
CN110688042A (zh) * 2019-09-29 2020-01-14 百度在线网络技术(北京)有限公司 界面显示方法和装置
CN113950033A (zh) * 2020-07-17 2022-01-18 华为技术有限公司 数据传输方法和设备
CN114936000A (zh) * 2019-12-26 2022-08-23 上海擎感智能科技有限公司 基于图片构架的车机交互方法、系统、介质及设备
CN115529575A (zh) * 2021-06-25 2022-12-27 博泰车联网(南京)有限公司 多设备切换方法、装置以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102780778A (zh) * 2012-07-23 2012-11-14 深圳市航盛电子股份有限公司 车载智能系统与智能终端互相控制的方法
CN103037014A (zh) * 2012-12-30 2013-04-10 中山市嘉盛电子有限公司 一种车载系统
CN103036968A (zh) * 2012-12-11 2013-04-10 广东好帮手电子科技股份有限公司 一种通过车载主机显示并控制智能手机的方法及系统
CN103175570A (zh) * 2011-12-21 2013-06-26 北京普源精电科技有限公司 一种具有截屏功能的测量装置
CN104363331A (zh) * 2014-10-13 2015-02-18 惠州市德赛西威汽车电子有限公司 一种手机互联启动手机app的方法及车载多媒体设备
CN105100870A (zh) * 2015-07-23 2015-11-25 海信集团有限公司 一种截屏方法及终端设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103175570A (zh) * 2011-12-21 2013-06-26 北京普源精电科技有限公司 一种具有截屏功能的测量装置
CN102780778A (zh) * 2012-07-23 2012-11-14 深圳市航盛电子股份有限公司 车载智能系统与智能终端互相控制的方法
CN103036968A (zh) * 2012-12-11 2013-04-10 广东好帮手电子科技股份有限公司 一种通过车载主机显示并控制智能手机的方法及系统
CN103037014A (zh) * 2012-12-30 2013-04-10 中山市嘉盛电子有限公司 一种车载系统
CN104363331A (zh) * 2014-10-13 2015-02-18 惠州市德赛西威汽车电子有限公司 一种手机互联启动手机app的方法及车载多媒体设备
CN105100870A (zh) * 2015-07-23 2015-11-25 海信集团有限公司 一种截屏方法及终端设备

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107783930A (zh) * 2016-08-29 2018-03-09 现代自动车株式会社 用于usb附件的usb通信控制方法
CN107783930B (zh) * 2016-08-29 2022-05-17 现代自动车株式会社 用于usb附件的usb通信控制方法
CN106970783A (zh) * 2016-09-06 2017-07-21 上海赫千电子科技有限公司 车载主机与电子设备的通信方法
CN108255398A (zh) * 2016-12-29 2018-07-06 乐视汽车(北京)有限公司 用于控制移动设备的方法、移动设备和通信系统
CN107341015B (zh) * 2017-06-30 2021-02-09 百度在线网络技术(北京)有限公司 终端间数据同步方法、装置、终端及存储介质
CN107341015A (zh) * 2017-06-30 2017-11-10 百度在线网络技术(北京)有限公司 终端间数据同步方法、装置、终端及存储介质
CN109857309B (zh) * 2019-01-21 2022-02-01 武汉卡比特信息有限公司 一种基于iOS移动终端的屏幕截图投射方法
CN109857309A (zh) * 2019-01-21 2019-06-07 武汉卡比特信息有限公司 一种基于iOS移动终端的屏幕截图投射方法
CN110248022A (zh) * 2019-06-06 2019-09-17 武汉卡比特信息有限公司 一种基于手机互联的三方应用的投屏方法
CN110688042A (zh) * 2019-09-29 2020-01-14 百度在线网络技术(北京)有限公司 界面显示方法和装置
CN114936000A (zh) * 2019-12-26 2022-08-23 上海擎感智能科技有限公司 基于图片构架的车机交互方法、系统、介质及设备
CN114936000B (zh) * 2019-12-26 2024-02-13 上海擎感智能科技有限公司 基于图片构架的车机交互方法、系统、介质及设备
CN113950033A (zh) * 2020-07-17 2022-01-18 华为技术有限公司 数据传输方法和设备
CN113950033B (zh) * 2020-07-17 2023-11-28 华为技术有限公司 数据传输方法和设备
CN115529575A (zh) * 2021-06-25 2022-12-27 博泰车联网(南京)有限公司 多设备切换方法、装置以及存储介质

Similar Documents

Publication Publication Date Title
CN105549821A (zh) 移动设备与车机的互联方法、装置和系统
US11748054B2 (en) Screen projection method and terminal device
CN111634188B (zh) 用于投屏的方法和装置
CN103200460B (zh) 一种车载导航仪复用个人移动信息终端功能的方法
CN104641622B (zh) 用于借助于移动电话控制车载计算机的系统
CN106354455B (zh) 人机界面显示处理装置及其方法
CN112165640B (zh) 一种显示设备
CN111343492B (zh) 一种浏览器在不同图层的显示方法及显示设备
CN112565740A (zh) 故障诊断方法、终端设备及显示设备
CA2395468A1 (en) Abstract device driver model for the portability of device drivers across different operating system platforms
CN111212293A (zh) 一种图像处理方法及显示设备
CN110853569A (zh) 单中控屏域控制系统及方法
CN116450251A (zh) 一种适配多设备的页面布局的方法及电子设备
CN113553017A (zh) 一种终端屏幕的适配方法、系统、设备及介质
CN114530148A (zh) 一种控制方法、装置及电子设备
CN114115870A (zh) 用户接口界面实现方法及装置
CN110347475B (zh) 服务调用方法、服务调用装置及服务调用系统
US20230139886A1 (en) Device control method and device
CN114900386B (zh) 一种终端设备及数据接力方法
EP3944069A2 (en) Method, apparatus and system of voice interaction, vehicles and storage media
KR20080031545A (ko) 사용자 인터페이스 변경 시스템 및 방법
CN110083323A (zh) 一种实现多显示和多用户并发的方法及装置
WO2023273407A1 (zh) 页面组件的生成方法及装置
CN115599265A (zh) 一种智能设备控制方法、终端设备、服务器和存储介质
CN114079819A (zh) 一种内容显示方法及显示设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160504

RJ01 Rejection of invention patent application after publication