CN107340983B - 一种电子设备双显示方法、装置及电子设备 - Google Patents

一种电子设备双显示方法、装置及电子设备 Download PDF

Info

Publication number
CN107340983B
CN107340983B CN201710461483.9A CN201710461483A CN107340983B CN 107340983 B CN107340983 B CN 107340983B CN 201710461483 A CN201710461483 A CN 201710461483A CN 107340983 B CN107340983 B CN 107340983B
Authority
CN
China
Prior art keywords
displayed
display screen
information
projector
entity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710461483.9A
Other languages
English (en)
Other versions
CN107340983A (zh
Inventor
阎晓东
张铭
党鹏辉
陶宇全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Asu Tech Co ltd
Original Assignee
Beijing Asu Tech Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Asu Tech Co ltd filed Critical Beijing Asu Tech Co ltd
Priority to CN201710461483.9A priority Critical patent/CN107340983B/zh
Publication of CN107340983A publication Critical patent/CN107340983A/zh
Priority to PCT/CN2018/091331 priority patent/WO2018228489A1/zh
Application granted granted Critical
Publication of CN107340983B publication Critical patent/CN107340983B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display

Abstract

本发明实施例提供了一种电子设备双显示方法、装置及电子设备,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器,所述方法包括:获取所述实体显示屏上的第一操作,得到第一操作结果,其中,所述第一操作携带有所述第一操作对应的实体显示屏标识;处理所述第一操作结果,并将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作对应的第一待显示信息,在所述影像成像进行显示。应用本发明实施例,实现电子设备的其中一个显示屏的操作可以控制另一显示屏显示操作结果,保证两个显示屏的操作显示的同步,从而提升用户的使用体验。

Description

一种电子设备双显示方法、装置及电子设备
技术领域
本发明涉及显示技术领域,特别是涉及一种电子设备双显示方法、装置及电子设备。
背景技术
随着电子产品的不断更新换代,单设备双显示的电子产品越来越受到人们的关注,单设备双显示是指在一个电子设备上通过主显示屏和副显示屏同时显示的技术,例如智能腕投手表,主显示屏为LCD(Liquid Crystal Display,液晶显示器)的实体显示屏,副显示屏为Laser(激光)由投影器投影出影像成像的投影显示屏。
现有的单设备双显示时,通过在设备处理器中预先设定相关的操作,及操作对应显示的显示界面。在实体显示屏上进行操作时,将该操作与预先设定的操作进行比较,识别操作所对应的实体显示界面,来完成操作内容的显示;在由投影器投影出影像成像的投影显示屏上进行操作时,处理器通过识别投影器到投影显示屏之间的激光光路中的手势操作,并将该手势操作与预先设定的操作进行比较,识别操作所对应的投影显示界面,来完成操作内容的显示,例如,当用户在投影显示屏上查看图片时,用户在投影器到投影显示屏之间的光路中做一个向右滑动的手势,投影显示屏会进行下一张图片的显示。由此可知,现有的实体显示屏的显示内容与投影显示屏的内容无关。对用户来说,用户在实体显示屏操作,来完成实体显示屏要实现的功能。而用户需要进行投影显示屏的操作时,用户并不能通过一次操作实现控制实体显示屏和投影显示屏显示,给用户带来了极大的不便。
发明内容
本发明实施例的目的在于提供一种电子设备双显示方法、装置及电子设备,以实现电子设备的其中一个显示屏的操作可以控制另一显示屏显示操作结果,保证两个显示屏的操作显示的同步,从而提升用户的使用体验。具体技术方案如下:
本发明实施例公开了一种电子设备双显示方法,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器,所述方法包括:
获取所述实体显示屏上的第一操作,得到第一操作结果,其中,所述第一操作携带有所述第一操作对应的实体显示屏标识;
处理所述第一操作结果,并将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作对应的第一待显示信息,在所述影像成像进行显示。
可选的,所述将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示,包括:
获取实体显示屏对应的第一接口;
通过所述第一接口查找投影器投影出的影像成像对应的第一驱动;
通过所述第一驱动,驱动所述实体显示屏的第一待显示操作,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示。
可选的,所述通过所述第一驱动,驱动所述影像成像的第一待显示操作,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示,包括:
通过与所述投影成像对应的第一帧缓冲驱动,驱动将所述第一待显示信息中的像素转换为所述投影显示中能够显示的第一待显示像素格式;
存储所述第一待显示像素,并将所述第一待显示像素发送给所述投影器;
通过所述投影器的驱动,驱动所述第一待显示像素的第一信号进行发送,并根据所述第一信号向所述投影器发送第一待显示像素,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示。
可选的,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示,包括:
以使合成与所述第一待显示信息对应的第一待显示像素,并将所述第一待显示操作中的第一待显示信息,在所述投影成像中进行显示。
本发明实施例公开了另一种电子设备双显示方法,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器,所述方法包括:
获取所述投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,所述第二操作携带有所述第二操作对应的所述投影器标识;
处理所述第二操作结果,并将所述第二操作结果显示到所述实体显示屏中,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示。
可选的,所述将所述第二操作结果显示到所述实体显示屏中,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示,包括:
获取投影器投影出的影像成像对应的第二接口;
通过所述第二接口查找所述实体显示屏对应的第二驱动;
通过所述第二驱动,驱动所述影像成像的第二待显示操作,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示。
可选的,所述通过所述第二驱动,驱动所述影像成像的第二待显示操作,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示,包括:
通过与所述实体显示屏对应的第二帧缓冲驱动,驱动所述第二待显示信息中的像素转换为所述实体显示屏中能够显示的第二待显示像素格式;
存储所述所有第二待显示像素,并将所述第二待显示像素发送给所述实体显示屏;
通过所述实体显示屏的驱动,驱动所述第二待显示像素的第二信号进行发送,并根据所述第二信号向所述实体显示屏发送第二待显示像素,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示。
可选的,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示,包括:
以使合成与所述第二待显示信息对应的第二待显示像素,并将所述第二待显示操作中的第二待显示信息,在所述实体显示屏中进行显示。
本发明实施例还公开了一种电子设备双显示装置,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器,所述装置包括:
第一获取模块,用于获取所述实体显示屏上的第一操作,得到第一操作结果,其中,所述第一操作携带有所述第一操作对应的实体显示屏标识;
第一处理模块,用于处理所述第一操作结果,并将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作对应的第一待显示信息,在所述影像成像进行显示;
或者,第二获取模块,用于获取所述投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,所述第二操作携带有所述第二操作对应的所述投影器标识
第二处理模块,用于处理所述第二操作结果,并将所述第二操作结果显示到所述实体显示屏中,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示。
本发明实施例还公开了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述的电子设备双显示方法步骤。
本发明实施例提供的一种电子设备双显示方法、装置及电子设备,先通过获取所述实体显示屏上的第一操作,得到第一操作结果,其中,所述第一操作携带有所述第一操作对应的实体显示屏标识;再通过处理所述第一操作结果,并将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作对应的第一待显示信息,在所述影像成像进行显示。实现了电子设备的其中一个显示屏的操作可以控制另一显示屏显示操作结果,保证了两个显示屏的操作显示的同步,从而提升了用户的使用体验。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种电子设备双显示方法的第一种流程示意图;
图2为本发明实施例提供的一种电子设备双显示方法的第二种流程示意图;
图3为本发明实施例提供的一种电子设备双显示方法的第三种流程示意图;
图4为本发明实施例提供的一种电子设备双显示装置的一种结构示意图;
图5为本发明实施例提供的一种电子设备双显示装置的另一种结构示意图;
图6为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明适合基于单设备双显示、Android系统框架、mipi&spi显示接口同时使用的产品。
本发明实施例提供的一种电子设备双显示方法,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器。
参见图1,图1为本发明实施例提供的一种电子设备双显示方法的第一种流程示意图,包括如下步骤:
S101,获取实体显示屏上的第一操作,得到第一操作结果,其中,第一操作携带有第一操作对应的实体显示屏标识;
具体的,本发明的显示屏为mipi&spi显示接口,例如实体显示屏为LCD(LiquidCrystal Display,液晶显示器)显示屏,另一个屏为投影器投影出的影像成像的投影显示屏。获取实体显示屏上的第一操作,例如,获取LCD显示屏上的一个播放下一张图片的操作,得到播放下一张图片的一个操作结果,其中,该操作携带有过LCD显示屏对应的与该操作对应的LCD显示屏标识。根据第一操作,得到第一操作结果,例如,进行一个操作视频暂停按钮的点击,得到的操作结果是暂停视频的播放。这里,第一操作是实体显示屏上所能识别的操作,命名为第一操作主要是为了和投影器影像成像的激光光路上的第二操作进行区分。
S102,处理第一操作结果,并将第一操作结果显示到投影器投影出的影像成像中,以使第一操作对应的第一待显示信息,在影像成像进行显示。
当在实体显示屏上进行操作之后,应用层会得到一个操作结果,应用层的应用程序会根据接收到的操作结果先访问对应的硬件设备,硬件的访问是在Framework(应用框架)层实现的。然后通过HAL(硬件抽象)层与Linux Kernel(核心)层的驱动程序的同步,以使该操作结果可以显示到相对应的屏幕上,最后,再通过核心层和实体显示屏的时间点的同步,以实现最终的两个屏的操作显示的同步。
由此可见,本发明实施例提供的一种电子设备双显示方法,先通过获取实体显示屏上的第一操作,得到第一操作结果,其中,第一操作携带有第一操作对应的实体显示屏标识;再通过处理第一操作结果,并将第一操作结果显示到投影器投影出的影像成像中,以使第一操作对应的第一待显示信息,在影像成像进行显示。实现了电子设备的实体显示屏的操作可以控制投影器投影出的影像成像得到操作结果,保证了两个显示屏的操作显示的同步,从而提升了用户的使用体验。
在本发明实施例中,将第一操作结果显示到投影器投影出的影像成像中,以使第一操作的对应的第一待显示信息,在影像成像进行显示,包括:
获取实体显示屏对应的第一接口。
应用框架层在硬件抽象层查找实体显示屏对应的接口。由于硬件的访问是在Framework层实现的,硬件访问服务是用Java语言实现的,HAL层是用C++语言编写的,因此硬件访问服务必须通过JNT技术调用硬件抽象层的接口。在Android应用程序框架层开发硬件访问服务的目的是为了让上层的Android应用程序能够访问对应的硬件设备。另外,Android系统的一个逻辑层级所有的硬件设备都需要在硬件抽象层进行抽象封装,这样应用程序不能直接操作硬件,只能访问通过硬件抽象层提供的接口。因为并不是所有的硬件设备都有标准的Linux Kernel层的接口;另外,如果将硬件设备支持的所有代码都放在Linux Kernel层,那就意味着发布时要公开驱动程序的源代码,公开的源代码就意味着把硬件的相关参数和实现都公开了,而某些设备制造商并不希望公开硬件驱动;还有就是针对某些硬件,Android有一些特殊的需求,基于以上理由,所以采用HAL开发的方式,不仅避免了应用程序直接访问Linux Kernel层,也保护了硬件的隐私。
通过第一接口查找投影器投影出的影像成像对应的第一驱动。
具体的,先将HAL层与Kernel层的sys文件同步,这里的sys文件指的是驱动程序的可执行代码,由于驱动程序是架起系统与硬件之间桥梁的重要文件,所以系统以sys文件为接口控制硬件。这样,HAL层与Kernel层的sys文件同步后,硬件驱动程序一方面分布在Kernel层中,另一方面分布在用户空间的HAL层中。通过在HAL层与Kernel层中的sys文件同步,实现了显示内容的同步。这样,HAL层的硬件设备与Kernel层的驱动程序对应,Kernel层就会调用与第二显示屏对应的驱动程序,来驱动第二显示屏的待显示操作。
通过第一驱动,驱动实体显示屏的第一待显示操作,以使第一操作的对应的第一待显示信息,在影像成像进行显示。
具体的,通过Kernel层的驱动,驱动实体显示屏的第一待显示操作,以使第一操作的对应的第一待显示信息,在影像成像进行显示。实现了实体显示屏的操作与的影像成像显示内容的同步。
在本发明实施例中,通过第一驱动,驱动影像成像的第一待显示操作,以使第一操作的对应的第一待显示信息,在影像成像进行显示,包括:
通过与投影成像对应的第一帧缓冲驱动,驱动将第一待显示信息中的像素转换为投影显示中能够显示的第一待显示像素格式;
存储第一待显示像素,并将第一待显示像素发送给投影器。
通常,往Framebuffer(帧缓冲)中写入数据通过SPI(Serial PeripheralInterface,串行外设接口)总线方式控制LCD(液晶显示屏)显示,但是现有的SPI接口传输的数据有限,所以要对Kernel buffers(核心层缓冲器)的Framebuffer中的像素进行一个转换,即将RGB888转换为RGB565,这里先将转换后的RGB565存放在LCD的SPI缓冲器中,然后再将LCD的SPI缓冲器中的RGB565通过SPI总线协议发送给LCD的驱动IC集成随机存储器,通过LCD驱动屏幕的显示。投影器的驱动程序产生驱动发送待显示像素的信号,返回给内核层,由内核层根据驱动信号向投影器发送待显示像素,以使待显示操作中的待显示信息,在投影器影像成像上进行显示。这里,帧缓冲是出现在Linux 2.2.xx及以后版本内核当中的一种驱动程序接口,这种接口将显示设备抽象为帧缓冲设备区。帧缓冲为图像硬件设备提供了一种抽象化处理,它代表了一些视频硬件设备,允许应用软件通过定义明确的界面来访问图像硬件设备。
通过投影器的驱动,驱动第一待显示像素的第一信号进行发送,并根据第一信号向投影器发送第一待显示像素,以使第一操作的对应的第一待显示信息,在影像成像进行显示。
具体的,在Kernel层和LCD driver(液晶显示屏驱动)中将时间点同步,LCD硬件以一定的时间(例如每20ms)同步给kernel层LCD的SPI缓冲器(RCB565)发送一个显示像素的信号,帧缓冲会进行一个RGB888到RGB565转换,然后通过SPI总线协议将RGB565发送给LCD硬件的driver IC IRAM(驱动集成电路集成随机存储器)。通过在Kernel层和LCD driver中将时间点同步,保证了双屏显示的时间计时点是同步的,使得主显示屏和副显示屏的SPI具有相同时间点,两者发送数据是同时完成的,两者的接收数据也是同时完成的。
在本发明实施例中,以使第一操作的对应的第一待显示信息,在影像成像进行显示,包括:
以使合成与第一待显示信息对应的第一待显示像素,并将第一待显示操作中的第一待显示信息,在投影成像中进行显示。
具体的,通过图像处理器合成应用框架层中与第一待显示信息对应的第一待显示像素,并将第一待显示操作中的第一待显示信息,在投影成像中进行显示。GPU作为图形处理器,需要在屏幕上合成数百万个像素以形成图像。
参见图2,图2为本发明实施例提供的一种电子设备双显示方法的第二种流程示意图,包括如下步骤:
S201,获取投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,第二操作携带有第二操作对应的投影器标识;
具体的,获取投影器影像成像的激光光路上的第二操作,这里,第二操作是指投影器所能识别的操作,例如,在投影器影像成像的激光光路上的一个手势操作,该手势操作携带有对应的投影器标识。根据第二操作,得到第二操作结果,例如,进行一个操作播放按钮的点击,得到的操作结果是播放视频。这里第二操作是投影器影像成像的激光光路上所能识别的操作,命名为第二操作主要是为了和实体显示屏上的第一操作进行区分。
S202,处理第二操作结果,并将第二操作结果显示到实体显示屏中,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。
具体的,当在影像成像上进行操作之后,应用层会得到该操作所对应的一个操作结果,应用层的应用程序会根据接收到的操作结果先访问对应的硬件设备,硬件的访问是在Framework层实现的。然后通过HAL层与Linux Kernel层的驱动程序的同步,以使该操作结果可以显示到相对应的屏幕上,最后,再通过核心层和实体显示屏的时间点的同步,以实现最终的两个屏的操作显示的同步。
由此可见,本发明实施例提供的一种电子设备双显示方法,先通过获取投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,第二操作携带有第二操作对应的投影器标识;再通过处理第二操作结果,并将第二操作结果显示到实体显示屏中,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。实现了电子设备的投影器投影出的影像成像的操作可以控制实体显示屏得到操作结果,保证了两个显示屏的操作显示的同步,从而提升了用户的使用体验
在本发明实施例中,将第二操作结果显示到实体显示屏中,以使第二操作对应的第二待显示信息,在实体显示屏进行显示,包括:
获取投影器投影出的影像成像对应的第二接口。
应用框架层在硬件抽象层查找投影器投影出的影像成像对应的接口。
通过第二接口查找实体显示屏对应的第二驱动。
这里,通过硬件抽象层与内核层的驱动程序的同步,查找硬件设备所对应的驱动程序,实现了双屏的显示内容的同步。
通过第二驱动,驱动影像成像的第二待显示操作,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。
具体的,通过Kernel层的驱动,驱动影像成像的第二待显示操作,以使第二操作的对应的第二待显示信息,在实体显示屏进行显示。实现了影像成像的操作与实体显示屏的显示内容的同步。
在本发明实施例中,通过第二驱动,驱动影像成像的第二待显示操作,以使第二操作对应的第二待显示信息,在实体显示屏进行显示,包括:
通过与实体显示屏对应的第二帧缓冲驱动,驱动第二待显示信息中的像素转换为实体显示屏中能够显示的第二待显示像素格式;
存储所有第二待显示像素,并将第二待显示像素发送给实体显示屏;
通过实体显示屏的驱动,驱动第二待显示像素的第二信号进行发送,并根据第二信号向实体显示屏发送第二待显示像素,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。
具体的,在Kernel层和LCD driver中将时间点同步,LCD硬件以一定的时间同步给kernel层LCD的SPI缓冲器(RGB565)发送一个显示像素的信号,帧缓冲会进行一个RGB888到RGB565转换,然后通过SPI总线协议将RGB565发送给LCD硬件的driver IC IRAM。通过在Kernel层和LCD driver中将时间点同步,保证了双屏显示的时间计时点是同步的,使得主显示屏和副显示屏的SPI具有相同时间点,两者发送数据是同时完成的,两者的接收数据也是同时完成的。
在本发明实施例中,以使第二操作对应的第二待显示信息,在实体显示屏进行显示,包括:
以使合成与第二待显示信息对应的第二待显示像素,并将第二待显示操作中的第二待显示信息,在实体显示屏中进行显示。
具体的,通过图像处理器合成应用框架层中与第二待显示信息对应的第二待显示像素,并将第二待显示操作中的第二待显示信息,在实体显示屏中进行显示。
通过本发明实施提供的一种电子设备双显示方法,在具体应用过程中,在其中一个屏上进行操作,在另外一个屏上实现了操作结果的同步显示,最终实现双屏操作显示的同步。例如,在实体显示屏上进行一个购物操作,实体显示屏上有该购物操作的标识,我们只需点击该标识,系统的应用框架层就会在硬件抽象层找到该标识对应的硬件设备,由于硬件抽象层和内核层的驱动程序的同步,所以只需根据硬件设备所对应的驱动程序,即通过投影器所对应的驱动程序来驱动实体显示屏上的购物操作,该购物操作结果就会显示到投影器投影出的影像成像中,另外,通过内核层和实体显示屏驱动的时间点的同步,使得双屏发送购物操作的数据是同时完成的,双屏的接收购物操作的数据也是同时完成的,实现了双屏的互动功能,并保证可双屏操作显示的同步。
参见图3,图3为本发明实施例提供的一种电子设备双显示方法的第三种流程示意图,图2中主要包括HAL Layer(硬件抽象层)、Kernel Layer(内核层)和LCD hardware(液晶显示屏硬件),具体实现过程包括两个方面:
第一方面,硬件抽象层和内核层的同步。
具体的,将HAL层与Kernel层的sys文件同步,HAL层对Kernel层硬件驱动程序的封装,将封装了硬件驱动程序存放在HAL层的Layerbuffer层缓冲器中,为Framework层提供接口。HAL层根据Framework层的访问查找对应的硬件设备,并将硬件设备的操作数据发给Kernel层的Kernel buffers(核心缓冲器)中的Framebuffer,然后调用硬件设备在Kernel层所对应的驱动程序,通过驱动程序执行该硬件设备所对应操作。通过在HAL层与Kernel层中的sys文件同步,显示内容会同步显示在对应的显示设备上,实现了显示内容的同步。
第二方面,内核层和LCD驱动的同步。
具体的,先将Kernel层的Framebuffer中的像素RGB888转换为RGB565,并将转换后的像素RGB565存放在LCD的SPI缓冲器中,以方便需要显示的时候直接从缓冲器中调用。然后,在Kernel层和LCD driver中将时间点同步,LCD硬件每20ms同步给kernel层LCD的SPI缓冲器(RCB565)发送一个显示像素的信号,Framebuffer会进行一个RGB888到RGB565转换,然后通过SPI transmit(SPI总线协议)将RGB565发送给LCD硬件的driver IC IRAM。其中,SPI总线在一次数据传输过程中,接口上只能有一个主机和一个从机能够通信,并且,主机总是想从机发送一个字节数据,而从机也总是向主机发送一个字节数据。通过在Kernel层和LCDdriver中将时间点同步,保证了双屏显示的时间计时点是同步的,使得主显示屏和副显示屏的SPI具有相同时间点,两者发送数据是同时完成的,两者的接收数据也是同时完成的。
根据以上两个方面中的层层同步的方式,实现了双屏互动的功能,同时保证了操作显示的同步。
本发明实施例提供的一种电子设备双显示装置,应用于电子设备,其中,电子设备包括实体显示屏和投影器。
参见图4,图4为本发明实施例提供的一种电子设备双显示装置的结构示意图,包括如下模块:
第一获取模块401,用于获取实体显示屏上的第一操作,得到第一操作结果,其中,第一操作携带有第一操作对应的实体显示屏标识;
第一处理模块402,用于处理第一操作结果,并将第一操作结果显示到投影器投影出的影像成像中,以使第一操作对应的第一待显示信息,在影像成像进行显示。其中,第一获取模块可以是应用层模块,第一处理模块可以包括:应用框架层模块(由Framework层构成的虚拟模块)、硬件抽象层模块(由HAL构成的虚拟模块)、内核层模块(由Kernel层构成的虚拟模块)、实体显示屏模块、投影器模块。
进一步的,第一处理模块402,包括:
第一获取子模块,用于获取实体显示屏对应的第一接口;
第一查找子模块,用于通过第一接口查找投影器投影出的影像成像对应的第一驱动;
第一驱动子模块,用于通过第一驱动,驱动实体显示屏的第一待显示操作,以使第一操作的对应的第一待显示信息,在影像成像进行显示。其中,第一获取子模块可以是应用框架层子模块(由Framework层构成的虚拟子模块),第一查找子模块可以是硬件抽象层子模块(由HAL构成的虚拟子模块),第一驱动子模块可以是内核层子模块(由Kernel层构成的虚拟子模块)。
进一步的,第一驱动子模块,包括:
第一像素转换单元,用于通过与投影成像对应的第一帧缓冲驱动,驱动将第一待显示信息中的像素转换为投影显示中能够显示的第一待显示像素格式;
第一发送单元,用于存储第一待显示像素,并将第一待显示像素发送给投影器;
第二发送单元,用于通过投影器的驱动,驱动第一待显示像素的第一信号进行发送,并根据第一信号向投影器发送第一待显示像素,以使第一操作的对应的第一待显示信息,在影像成像进行显示。
其中,第一像素转换单元可以是内核层单元(由Kernel层构成的虚拟单元),第一发送单元可以是内核层单元(由Kernel层构成的虚拟单元),第二发送单元可以是投影器单元。
进一步的,第一处理模块402,还包括:
第一合成子模块,用于以使合成与第一待显示信息对应的第一待显示像素,并将第一待显示操作中的第一待显示信息,在投影成像中进行显示。其中,第一合成子模块,可以是应用框架层子模块(由Framework层构成的虚拟子模块)。
参见图5,图5为本发明实施例提供的另一种电子设备双显示装置的结构示意图,包括如下模块:
第二获取模块501,用于获取投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,第二操作携带有第二操作对应的投影器标识;
第二处理模块502,用于处理第二操作结果,并将第二操作结果显示到实体显示屏中,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。其中,第二获取模块可以是应用层模块,第二处理模块可以包括:应用框架层模块(由Framework层构成的虚拟模块)、硬件抽象层模块(由HAL构成的虚拟模块)、内核层模块(由Kernel层构成的虚拟模块)、实体显示屏模块、投影器模块。
进一步的,第二处理模块502,包括:
第二获取子模块,用于获取投影器投影出的影像成像对应的第二接口;
第二查找子模块,用于通过第二接口查找实体显示屏对应的第二驱动;
第二驱动子模块,用于通过第二驱动,驱动影像成像的第二待显示操作,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。
其中,第二获取子模块可以是应用框架层子模块(由Framework层构成的虚拟子模块),第二查找子模块可以是硬件抽象层子模块(由HAL构成的虚拟子模块),第二驱动子模块可以是内核层子模块(由Kernel层构成的虚拟子模块)。
进一步的,第二驱动子模块,包括:
第二像素转换单元,用于通过与实体显示屏对应的第二帧缓冲驱动,驱动第二待显示信息中的像素转换为实体显示屏中能够显示的第二待显示像素格式;
第三发送单元,用于存储所有第二待显示像素,并将第二待显示像素发送给实体显示屏;
第四发送单元,用于通过实体显示屏的驱动,驱动第二待显示像素的第二信号进行发送,并根据第二信号向实体显示屏发送第二待显示像素,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。
其中,第二像素转换单元可以是内核层单元(由Kernel层构成的虚拟单元),第三发送单元可以是内核层单元(由Kernel层构成的虚拟单元),第四发送单元可以是实体显示屏单元。
进一步的,第二处理模块502,包括:
第二合成子模块,用于以使合成与第二待显示信息对应的第二待显示像素,并将第二待显示操作中的第二待显示信息,在实体显示屏中进行显示。其中,第二合成子模块,可以是应用框架层子模块(由Framework层构成的虚拟子模块)。
由此可见,本发明实施例提供的一种电子设备双显示装置,通过操作模块在电子设备的第一显示屏上进行操作,得到第一操作结果,其中,操作携带第一显示屏进行输入携带的待显示信息的待显示操作,且在第二显示屏待显示待显示信息;然后通过显示模块将第一操作结果显示到电子设备的第二显示屏中,以使待显示操作中的待显示信息,在第二显示屏上进行显示。实现了电子设备的其中一个显示屏可以控制操作另一显示屏,保证了两个显示屏的操作显示的同步,从而提升了用户的使用体验,增加了用户的适用范围。
本发明实施例还提供了一种电子设备,如图6所示,包括处理器601、通信接口602、存储器603和通信总线604,其中,处理器601,通信接口602,存储器603通过通信总线604完成相互间的通信,
存储器603,用于存放计算机程序;
处理器601,用于执行存储器603上所存放的程序时,实现如下步骤:
获取实体显示屏上的第一操作,得到第一操作结果,其中,第一操作携带有第一操作对应的实体显示屏标识;
处理第一操作结果,并将第一操作结果显示到投影器投影出的影像成像中,以使第一操作对应的第一待显示信息,在影像成像进行显示;
或者,获取投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,第二操作携带有第二操作对应的投影器标识;
处理第二操作结果,并将第二操作结果显示到实体显示屏中,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质内存储有计算机程序,计算机程序被处理器执行时实现如下步骤:
获取实体显示屏上的第一操作,得到第一操作结果,其中,第一操作携带有第一操作对应的实体显示屏标识;
处理第一操作结果,并将第一操作结果显示到投影器投影出的影像成像中,以使第一操作对应的第一待显示信息,在影像成像进行显示;
或者,获取投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,第二操作携带有第二操作对应的投影器标识;
处理第二操作结果,并将第二操作结果显示到实体显示屏中,以使第二操作对应的第二待显示信息,在实体显示屏进行显示。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、电子设备、计算机可读存储介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (8)

1.一种电子设备双显示方法,其特征在于,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器,所述方法包括:
获取所述实体显示屏上的第一操作,得到第一操作结果,其中,所述第一操作携带有所述第一操作对应的实体显示屏标识;
处理所述第一操作结果,并将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作对应的第一待显示信息,在所述影像成像进行显示;
所述将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示,包括:
获取实体显示屏对应的第一接口;
通过所述第一接口查找投影器投影出的影像成像对应的第一驱动;
通过所述第一驱动,驱动所述实体显示屏的第一待显示操作,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示。
2.根据权利要求1所述的方法,其特征在于,所述通过所述第一驱动,驱动所述实体显示屏的第一待显示操作,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示,包括:
通过与所述投影成像对应的第一帧缓冲驱动,驱动将所述第一待显示信息中的像素转换为所述投影显示中能够显示的第一待显示像素格式;
存储所述第一待显示像素,并将所述第一待显示像素发送给所述投影器;
通过所述投影器的驱动,驱动所述第一待显示像素的第一信号进行发送,并根据所述第一信号向所述投影器发送第一待显示像素,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示。
3.根据权利要求1-2任一项所述的方法,其特征在于,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示,包括:
以使合成与所述第一待显示信息对应的第一待显示像素,并将所述第一待显示操作中的第一待显示信息,在所述投影成像中进行显示。
4.一种电子设备双显示方法,其特征在于,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器,所述方法包括:
获取所述投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,所述第二操作携带有所述第二操作对应的所述投影器标识;
处理所述第二操作结果,并将所述第二操作结果显示到所述实体显示屏中,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示;
所述将所述第二操作结果显示到所述实体显示屏中,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示,包括:
获取投影器投影出的影像成像对应的第二接口;
通过所述第二接口查找所述实体显示屏对应的第二驱动;
通过所述第二驱动,驱动所述影像成像的第二待显示操作,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示。
5.根据权利要求4所述的方法,其特征在于,所述通过所述第二驱动,驱动所述影像成像的第二待显示操作,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示,包括:
通过与所述实体显示屏对应的第二帧缓冲驱动,驱动所述第二待显示信息中的像素转换为所述实体显示屏中能够显示的第二待显示像素格式;
存储所述所有第二待显示像素,并将所述第二待显示像素发送给所述实体显示屏;
通过所述实体显示屏的驱动,驱动所述第二待显示像素的第二信号进行发送,并根据所述第二信号向所述实体显示屏发送第二待显示像素,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示。
6.根据权利要求4-5任一项所述的方法,其特征在于,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示,包括:
以使合成与所述第二待显示信息对应的第二待显示像素,并将所述第二待显示操作中的第二待显示信息,在所述实体显示屏中进行显示。
7.一种电子设备双显示装置,其特征在于,应用于电子设备,其中,所述电子设备包括实体显示屏和投影器,所述装置包括:
第一获取模块,用于获取所述实体显示屏上的第一操作,得到第一操作结果,其中,所述第一操作携带有所述第一操作对应的实体显示屏标识;
第一处理模块,用于处理所述第一操作结果,并将所述第一操作结果显示到所述投影器投影出的影像成像中,以使所述第一操作对应的第一待显示信息,在所述影像成像进行显示;
所述第一处理模块,具体用于:
获取实体显示屏对应的第一接口;
通过所述第一接口查找投影器投影出的影像成像对应的第一驱动;
通过所述第一驱动,驱动所述实体显示屏的第一待显示操作,以使所述第一操作的对应的第一待显示信息,在所述影像成像进行显示;
或者,第二获取模块,用于获取所述投影器影像成像的激光光路上的第二操作,得到第二操作结果,其中,所述第二操作携带有所述第二操作对应的所述投影器标识;
第二处理模块,用于处理所述第二操作结果,并将所述第二操作结果显示到所述实体显示屏中,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示;
所述第二处理模块,具体用于:
获取投影器投影出的影像成像对应的第二接口;
通过所述第二接口查找所述实体显示屏对应的第二驱动;
通过所述第二驱动,驱动所述影像成像的第二待显示操作,以使所述第二操作对应的第二待显示信息,在所述实体显示屏进行显示。
8.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-3任一所述的方法步骤或者权利要求4-6任一所述的方法步骤。
CN201710461483.9A 2017-06-16 2017-06-16 一种电子设备双显示方法、装置及电子设备 Active CN107340983B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710461483.9A CN107340983B (zh) 2017-06-16 2017-06-16 一种电子设备双显示方法、装置及电子设备
PCT/CN2018/091331 WO2018228489A1 (zh) 2017-06-16 2018-06-14 一种电子设备双显示方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710461483.9A CN107340983B (zh) 2017-06-16 2017-06-16 一种电子设备双显示方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN107340983A CN107340983A (zh) 2017-11-10
CN107340983B true CN107340983B (zh) 2021-01-22

Family

ID=60221134

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710461483.9A Active CN107340983B (zh) 2017-06-16 2017-06-16 一种电子设备双显示方法、装置及电子设备

Country Status (2)

Country Link
CN (1) CN107340983B (zh)
WO (1) WO2018228489A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107340983B (zh) * 2017-06-16 2021-01-22 北京一数科技有限公司 一种电子设备双显示方法、装置及电子设备
CN113741850B (zh) * 2021-11-03 2022-01-25 展讯通信(上海)有限公司 多屏显示控制方法及装置、计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105227882A (zh) * 2015-09-25 2016-01-06 联想(北京)有限公司 一种显示方法及对应装置
CN105743949A (zh) * 2014-12-11 2016-07-06 厦门雅迅网络股份有限公司 一种两个设备间的双屏同步的方法
CN106125845A (zh) * 2016-06-30 2016-11-16 珠海格力电器股份有限公司 一种移动终端
CN106201252A (zh) * 2016-06-30 2016-12-07 努比亚技术有限公司 一种移动终端的地图显示装置和方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100419666C (zh) * 2005-07-08 2008-09-17 联想(北京)有限公司 屏幕同步切换控制方法
CN104778022B (zh) * 2014-01-09 2019-07-26 联想(北京)有限公司 一种数据处理方法及电子设备
CN105334956B (zh) * 2014-08-15 2018-08-31 联想(北京)有限公司 一种信息处理方法及电子设备
CN107340983B (zh) * 2017-06-16 2021-01-22 北京一数科技有限公司 一种电子设备双显示方法、装置及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105743949A (zh) * 2014-12-11 2016-07-06 厦门雅迅网络股份有限公司 一种两个设备间的双屏同步的方法
CN105227882A (zh) * 2015-09-25 2016-01-06 联想(北京)有限公司 一种显示方法及对应装置
CN106125845A (zh) * 2016-06-30 2016-11-16 珠海格力电器股份有限公司 一种移动终端
CN106201252A (zh) * 2016-06-30 2016-12-07 努比亚技术有限公司 一种移动终端的地图显示装置和方法

Also Published As

Publication number Publication date
CN107340983A (zh) 2017-11-10
WO2018228489A1 (zh) 2018-12-20

Similar Documents

Publication Publication Date Title
US10613812B2 (en) System, control apparatus and control method for distributed video display
TWI480851B (zh) 鏡射圖形內容至一外部顯示器
WO2020034893A1 (zh) 智能交互系统、书写轨迹显示方法、装置、平板及介质
WO2016091082A1 (zh) 多屏拼接显示处理方法和设备
US20230291980A1 (en) Method and apparatus for video generation and displaying, device, and medium
WO2018044051A1 (en) Method for driving display including curved display area, display driving circuit supporting the same, and electronic device including the same
WO2023125677A1 (zh) 独显插帧电路、方法、装置、芯片、电子设备及介质
CN107340983B (zh) 一种电子设备双显示方法、装置及电子设备
CN111355861A (zh) 一种多屏视频同步拼接装置和方法
US8459805B2 (en) Display apparatus
CN116419049A (zh) 图像处理方法、图像处理系统、装置和电子设备
WO2023198190A1 (zh) 一种图像显示方法、装置、终端设备及存储介质
CN114339045A (zh) 图像处理系统和显示装置
CN111399790B (zh) 一种画面共享系统及其实现方法
CN113132783A (zh) 一种多机共享的多屏显示控制系统及方法
CN112363683A (zh) 一种网页应用支持多图层显示的方法及显示设备
CN112367557A (zh) Led电视墙的显示方法、电视和计算机可读存储介质
JP2005122119A (ja) Mpuとビデオコーデックとで構成されるシステムにおけるビデオインタフェース装置
TWI798840B (zh) 視訊資料處理方法及裝置
CN111314630B (zh) 显示设备及其显示方法
KR100596707B1 (ko) 티브와 인터넷 화면을 분할하여 디스플레이하는 장치
CN111327954B (zh) 显示配置信息处理方法及显示设备
CN116774957A (zh) 多屏显示方法及装置、终端设备、存储介质
CN115543507A (zh) 分辨率切换方法、装置及电子设备
CN116339659A (zh) 一种投屏显示方法、装置、设备以及计算机存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant