CN115617295A - 多屏交互方法、装置、设备及存储介质 - Google Patents

多屏交互方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN115617295A
CN115617295A CN202211293645.XA CN202211293645A CN115617295A CN 115617295 A CN115617295 A CN 115617295A CN 202211293645 A CN202211293645 A CN 202211293645A CN 115617295 A CN115617295 A CN 115617295A
Authority
CN
China
Prior art keywords
window
screen
display screen
display
current display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211293645.XA
Other languages
English (en)
Inventor
李林峰
汪杨刚
李侃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Haiwei Technology Co ltd
Original Assignee
Wuhan Haiwei Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Haiwei Technology Co ltd filed Critical Wuhan Haiwei Technology Co ltd
Priority to CN202211293645.XA priority Critical patent/CN115617295A/zh
Publication of CN115617295A publication Critical patent/CN115617295A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及显示技术领域,公开了一种多屏交互方法、装置、设备及存储介质,该方法包括:根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过显示窗口显示对应的多媒体信息;当显示窗口超出当前显示屏的边缘时,在当前显示屏的相邻显示屏中构建扩展窗口;基于显示窗口位于当前显示屏中的剩余窗口和扩展窗口构建整体跨屏窗口,并通过整体跨屏窗口对多媒体信息进行显示。相比于现有技术中,通过在其他屏上打开应用来实现多块屏之间的交互,本发明通过整体跨屏窗口对多媒体信息进行显示,消除了现有技术中对多块显示屏进行切换操作时产生的割裂感,从而实现可在多块屏上随意拖动应用窗口显示位置,提升了用户体验。

Description

多屏交互方法、装置、设备及存储介质
技术领域
本发明涉及显示技术领域,尤其涉及一种多屏交互方法、装置、设备及存储介质。
背景技术
随着目前车机显示屏越来越大,越来越多,车辆前排显示屏被分成了多个,如仪表屏,中控屏,副驾屏。用户触摸屏幕成为了与车辆交互的重要方式。但是显示屏被分割成多块,操作上存在割裂感。且目前市面上存在的双屏交互方案,大部分是通过将显示信号切换到其他屏幕,或者在其他屏幕上打开一个应用。第一种方案只是切换视频信号输出设备,两块屏幕之间实际上没有交互;第二种方案,是通过在其他屏上打开应用,通过应用实现多块屏之间的交互,但是观感上有割裂感,切换过程也生硬,没有做到无缝切换的流畅。
因此,目前行业内亟需一种能无缝切换应用显示窗口的方案,做到类似于PC上多屏拖动窗口的效果,使用户在面对车机上多块屏时,给用户一种整屏的视觉感受,提高用户的操作体验。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供了一种多屏交互方法、装置、设备及存储介质,旨在解决现有技术中无法无缝切换车机显示屏的应用显示窗口的技术问题。
为实现上述目的,本发明提供了一种多屏交互方法,所述方法包括以下步骤:
根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息;
当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口;
基于所述显示窗口位于所述当前显示屏中的剩余窗口和所述扩展窗口构建整体跨屏窗口,并通过所述整体跨屏窗口对所述多媒体信息进行显示。
可选地,所述当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口,包括:
判断所述显示窗口是否超出所述当前显示屏的边缘;
若是,则在所述当前显示屏的相邻显示屏中构建扩展窗口。
可选地,所述若是,则在所述当前显示屏的相邻显示屏中构建扩展窗口,包括:
若是,则基于所述显示窗口以及位于所述当前显示屏中的剩余窗口,确定所述显示窗口超出所述当前显示屏的部分窗口;
隐藏所述部分窗口,并基于所述部分窗口在所述当前显示屏的相邻显示屏中构建扩展窗口,所述扩展窗口的尺寸与所述部分窗口相同。
可选地,所述判断所述显示窗口是否超出所述当前显示屏的边缘之后,还包括:
若否,则隐藏所述显示窗口,并将所述多媒体信息显示在所述当前显示屏中。
可选地,所述根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息之前,还包括:
读取显示屏参数,所述显示屏参数包括显示屏尺寸、显示屏分辨率;
基于所述显示屏参数将多媒体信号转换为多媒体信息。
可选地,所述根据用户基于当前显示屏触发的触摸事件生成显示窗口,包括:
根据用户基于当前显示屏触发的触摸事件获取触摸点坐标;
根据所述触摸点坐标生成显示窗口。
可选地,所述根据所述触摸点坐标生成显示窗口,包括:
标记以所述触摸点坐标为左上角点坐标、以预设长度为边长的封闭图形区域;
将所述封闭图形区域设定为显示窗口。
此外,为实现上述目的,本发明还提出一种多屏交互装置,所述多屏交互装置包括:
窗口生成模块,用于根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息;
窗口扩展模块,用于当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口;
信息显示模块,用于基于所述显示窗口位于所述当前显示屏中的剩余窗口和所述扩展窗口构建整体跨屏窗口,并通过所述整体跨屏窗口对所述多媒体信息进行显示。
此外,为实现上述目的,本发明还提出一种多屏交互设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的多屏交互程序,所述多屏交互程序配置为实现如上文所述的多屏交互方法的步骤。
此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有多屏交互程序,所述多屏交互程序被处理器执行时实现如上文所述的多屏交互方法的步骤。
本发明根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过显示窗口显示对应的多媒体信息,当显示窗口超出当前显示屏的边缘时,在当前显示屏的相邻显示屏中构建扩展窗口,最后基于显示窗口位于当前显示屏中的剩余窗口和扩展窗口构建整体跨屏窗口,并通过整体跨屏窗口对多媒体信息进行显示。相比于现有技术中,通过在其他屏上打开应用来实现多块屏之间的交互,本发明基于显示窗口位于当前显示屏中的剩余窗口和扩展窗口构建整体跨屏窗口,并通过整体跨屏窗口对多媒体信息进行显示,消除了现有技术中对多块显示屏进行切换操作时产生的割裂感,从而实现可在多块屏上随意拖动应用窗口显示位置,提升了用户体验。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的多屏交互设备的结构示意图;
图2为本发明多屏交互方法第一实施例的流程示意图;
图3为本发明多屏交互方法剩余窗口和扩展窗口示意图;
图4为本发明多屏交互方法第二实施例的流程示意图;
图5为本发明多屏交互方法第三实施例的流程示意图;
图6为本发明多屏交互方法显示窗口的示意图;
图7为本发明多屏交互装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的多屏交互设备结构示意图。
如图1所示,该多屏交互设备可以包括:处理器1001,例如中央处理器(CentralProcessing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity,Wi-Fi)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM),也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对多屏交互设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及多屏交互程序。
在图1所示的多屏交互设备中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明多屏交互设备中的处理器1001、存储器1005可以设置在多屏交互设备中,所述多屏交互设备通过处理器1001调用存储器1005中存储的多屏交互程序,并执行本发明实施例提供的多屏交互方法。
本发明实施例提供了一种多屏交互方法,参照图2,图2为本发明多屏交互方法第一实施例的流程示意图。
本实施例中,所述多屏交互方法包括以下步骤:
步骤S10:根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息。
需要说明的是,本实施例方法的执行主体可以是具有触摸交互功能、多媒体信息输入输出功能以及程序运行功能的系统或设备,例如车机系统、车载设备等,还可以是能够实现相同或相似功能的其他电子设备,本实施例对此不加以限制。此处将以车机系统为例对本发明多屏交互方法的各项实施例进行说明。
可理解的是,上述当前显示屏指的是在一个触摸事件中,用户通过首次触摸达成交互行为的显示屏,它可以是LCD屏(Liquid Crystal Display,液晶显示屏)、LED屏(Light-Emitting Diode Display,发光二极管显示屏)、OLED屏(Organic Light-EmittingDiode Display,有机发光二极管显示屏)或其他支持触摸功能的屏幕,本实施例对此不作限制。上述触摸事件可以包括但不限定于用户触摸当前触摸屏上集成的软件图标、文本框、页面控件或其他组件,以使车机系统根据该事件完成交互。
应理解的是,上述显示窗口指的是向用户展示对应于上述触摸事件的多媒体信息窗口。上述多媒体信息可以包括视频信息、音频信息、图像信息等其他信息中的一种或多种,本实施例对此不加以限制。
在具体实现中,用户通过触摸显示屏生成显示窗口,并通过显示窗口显示用户触摸显示屏意图显示的多媒体信息。
进一步地,为了使用户获得适应显示屏尺寸和分辨率的多媒体信息,在本实施例中的步骤S10之前,还可以包括:
步骤S01:读取显示屏参数,所述显示屏参数包括显示屏尺寸、显示屏分辨率。
需要说明的是,上述显示屏参数可以是通过车机系统中内置的硬件检测软件来自动读取的。当然,其他能够读取上述显示屏参数的方法在本实施例中也同样适用,此处不作赘述。
步骤S02:基于所述显示屏信息将多媒体信号转换为多媒体信息。
可理解的是,上述多媒体信号可以是视频信号、音频信号、图像信号等其他信号中的一种或多种,本实施例对此不加以限制。
在具体实现中,车机系统通过低电压差分信号组件接收上述多媒体信号,并根据默认参数(也可以是用户自行设置的参数)对上述多媒体信号进行解析,并将解析结果转化为多媒体信息后传输至上述显示屏中。
步骤S20:当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口。
应理解的是,上述当前显示屏的边缘包括当前显示屏的任意一条边缘。
在具体实现中,可以通过比较显示窗口的长宽(假设分别为a,b)与显示窗口在当前显示屏中所占区域的长宽(假设分别为x,y)的大小来判断显示窗口是否超出上述当前显示屏的边缘,上述长为水平方向上的长度,宽为垂直方向上的长度。若a=x且b=y,则说明显示窗口未超出上述当前显示屏的边缘;若a≠x或b≠y,则说明显示窗口超出上述当前显示屏的边缘。此外,若通过上述方法已经确认显示窗口超出上述当前显示屏的边缘,可以通过检测当前显示屏边缘交点数量(假设为z)来确认具体为哪条边缘超出,当检测到一条边缘的交点数量z为1或2时,则说明该条边缘超出当前显示屏的边缘。
步骤S30:基于所述显示窗口位于所述当前显示屏中的剩余窗口和所述扩展窗口构建整体跨屏窗口,并通过所述整体跨屏窗口对所述多媒体信息进行显示。
需要说明的是,上述当前显示屏中的剩余窗口指的当前显示屏中包含上述显示窗口的窗口区域,即当前显示屏与显示窗口的重叠区域。
参考图3,图3为本发明多屏交互方法剩余窗口和扩展窗口示意图。
在具体实现中,当上述显示窗口超出当前显示屏的任意一条边缘时,都会在所述当前显示屏的相邻显示屏中构建扩展窗口。如图4所示,当显示窗口超出当前显示屏(即point)的左边缘(即leftpoint)时,则在当前显示屏的左相邻显示屏中构建扩展窗口(即leftDialog),当前显示屏中包含的显示窗口即为上述剩余窗口(即右屏幕中的dialog);当显示窗口超出当前显示屏的右边缘(即rightpoint)时,则在当前显示屏的右相邻显示屏中构建扩展窗口(即rightDialog),当前显示屏中包含的显示窗口即为上述剩余窗口(即左屏幕中的dialog)。
可理解的是,上述整体跨屏窗口指的是上述剩余窗口与上述扩展窗口的合并窗口,从显示的多媒体信息上来说,上述整体跨屏窗口包含的多媒体信息与上述通过多媒体信号转换过来的多媒体信息是一致的。
本实施例根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过显示窗口显示对应的多媒体信息,当显示窗口超出当前显示屏的边缘时,在当前显示屏的相邻显示屏中构建扩展窗口,最后基于显示窗口位于当前显示屏中的剩余窗口和扩展窗口构建整体跨屏窗口,并通过整体跨屏窗口对多媒体信息进行显示。相比于现有技术中,通过在其他屏上打开应用来实现多块屏之间的交互,本实施例上述方法基于显示窗口位于当前显示屏中的剩余窗口和扩展窗口构建整体跨屏窗口,并通过整体跨屏窗口对多媒体信息进行显示,消除了现有技术中对多块显示屏进行切换操作时产生的割裂感,从而实现可在多块屏上随意拖动应用窗口显示位置,提升了用户体验。
参考图4,图4为本发明多屏交互方法第二实施例的流程示意图。
基于上述第一实施例,在本实施例中,为了确定是否需要在当前显示屏的相邻显示屏中构建扩展窗口,所述步骤S20包括:
步骤S201:判断所述显示窗口是否超出所述当前显示屏的边缘。
应理解的是,本实施例是通过将上述显示窗口的任意一条边缘与上述当前显示屏的任意一条边缘进行比对,来判断所述显示窗口是否超出所述当前显示屏的边缘。
步骤S202:若是,则在所述当前显示屏的相邻显示屏中构建扩展窗口。
需要说明的是,上述相邻显示屏是根据上述显示窗口超出当前显示屏的边缘的位置来确定的。例如,当上述显示窗口超出当前显示屏的左边缘时,则将与上述当前显示屏左边相邻的显示屏确定为相邻显示屏;当上述显示窗口超出当前显示屏的上边缘时,则将与上述当前显示屏上边相邻的显示屏确定为相邻显示屏。
进一步地,为了确定上述扩展窗口对应的窗口尺寸,本实施例中的步骤S202,可包括:
步骤S2021:若是,则基于所述显示窗口以及位于所述当前显示屏中的剩余窗口,确定所述显示窗口超出所述当前显示屏的部分窗口。
可理解的是,将上述当前显示屏中的剩余窗口与上述超出所述当前显示屏的部分窗口进行拼合,可以得到完整的显示窗口。
步骤S2022:隐藏所述部分窗口,并基于所述部分窗口在所述当前显示屏的相邻显示屏中构建扩展窗口,所述扩展窗口的尺寸与所述部分窗口相同。
在具体实现中,假设显示窗口为一个长方形窗口,长和宽分别为A和B。用户通过触摸显示屏将上述显示窗口往左边拖动一段距离后,显示窗口的左边缘超出了当前显示屏的左边缘,且此时位于当前显示屏中的剩余窗口的长和宽分别为C和B。那么可以通过车机系统内部的相关组件计算出超出所述当前显示屏的部分窗口的长和宽分别为(A-C)和B。
进一步地,为了使得上述显示窗口在无需被调用时能够自动隐藏,从而降低车机系统的内存占用,在本实施例中的步骤S201之后,还可以包括:
步骤S2011:若否,则隐藏所述显示窗口,并将所述多媒体信息显示在所述当前显示屏中。
应理解的是,当显示窗口完全位于当前显示屏中时,表明显示窗口未超出当前显示屏的边缘;当显示窗口的某一条或某几条边缘与当前显示屏的边缘完全重合时,仍然表明显示窗口未超出当前显示屏的边缘。在上述显示窗口未超出当前显示屏的边缘的情况下,代表此时不需要调用显示窗口也能向用户显示完整的多媒体信息。因此,为了降低车机系统由于调用了显示窗口而占用的内存容量,显示窗口将被隐藏。
本实施例根据判断显示窗口是否超出当前显示屏的边缘:若是,则基于显示窗口以及位于当前显示屏中的剩余窗口,确定显示窗口超出当前显示屏的部分窗口后,隐藏部分窗口,并基于部分窗口在当前显示屏的相邻显示屏中构建扩展窗口;若否,则隐藏显示窗口,并将多媒体信息显示在当前显示屏中。由于本实施例是通过判断显示窗口是否超出当前显示屏的边缘的方法来确定是否需要调用显示窗口。相较于现有技术中通过单一地切换视频信号的方法,本实施例上述方法提升了多屏交互过程中的流畅性。
参考图5,图5为本发明多屏交互方法第三实施例的流程示意图。
基于上述各实施例,在本实施例中,所述步骤S10可包括:
步骤S101:根据用户基于当前显示屏触发的触摸事件获取触摸点坐标。
需要说明的是,车机系统可以将所有显示屏看做一个整体,并基于该整体建立平面直角坐标系,从而使得显示屏上的每一个点都拥有其对应的坐标值。
应理解的是,用户在触发触摸事件后,车机系统可以通过重写Activity的onTouchEvent(MotionEvent event)方法,并基于该方法中的参数event来获取触摸点坐标。当然,其他能够获取触摸点坐标的方法也同样适用于本实施例,此处不作赘述。
步骤S102:根据所述触摸点坐标生成显示窗口。
进一步地,为了统一显示窗口的生成规则,从而加快生成窗口的速率,所述步骤S102,可包括:
步骤S1021:标记以所述触摸点坐标为左上角点坐标、以预设长度为边长的封闭图形区域。
需要说明的是,上述预设长度可以由用户按照需求自行设定。
步骤S1022:将所述封闭图形区域设定为显示窗口。
参考图6,图6为本发明多屏交互方法显示窗口的示意图。
在具体实现中,根据用户的触摸事件可以从显示屏中获取对应触摸点的坐标值。如图6所示,假设在某次触摸事件中对应显示屏上触摸点的坐标值为(x,y),长和宽均为width,那么此次触摸事件对应的显示窗口(即图6中的dialog)的大小为图6中所示的区域。
本实施例根据用户基于当前显示屏触发的触摸事件获取触摸点坐标,再根据触摸点坐标生成显示窗口,标记以触摸点坐标为左上角点坐标、以预设长度为边长的封闭图形区域,最后将封闭图形区域设定为显示窗口。由于本实施例是通过将所有显示屏看做一个整体建立平面直角坐标系,从而对每次触摸事件对应触摸点的坐标值来确定显示窗口。相较于现有技术中采用在另一块显示屏上打开应用,通过应用实现两块显示屏的交互,本实施例上述方法消除了使用指定应用才能进行多屏交互的局限性,可以在自定义显示窗口尺寸的情况下进行多屏交互。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有多屏交互程序,所述多屏交互程序被处理器执行时实现如上文所述的多屏交互方法的步骤。
参照图7,图7为本发明多屏交互装置第一实施例的结构框图。
如图7所示,本发明实施例提出的多屏交互装置包括:
窗口生成模块701,用于根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息;
窗口扩展模块702,用于当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口;
信息显示模块703,用于基于所述显示窗口位于所述当前显示屏中的剩余窗口和所述扩展窗口构建整体跨屏窗口,并通过所述整体跨屏窗口对所述多媒体信息进行显示。
本实施例根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过显示窗口显示对应的多媒体信息,当显示窗口超出当前显示屏的边缘时,在当前显示屏的相邻显示屏中构建扩展窗口,最后基于显示窗口位于当前显示屏中的剩余窗口和扩展窗口构建整体跨屏窗口,并通过整体跨屏窗口对多媒体信息进行显示。相比于现有技术中,通过在其他屏上打开应用来实现多块屏之间的交互,本实施例基于显示窗口位于当前显示屏中的剩余窗口和扩展窗口构建整体跨屏窗口,并通过整体跨屏窗口对多媒体信息进行显示,消除了现有技术中对多块显示屏进行切换操作时产生的割裂感,从而实现可在多块屏上随意拖动应用窗口显示位置,提升了用户体验。
本发明多屏交互装置的其他实施例或具体实现方式可参照上述各方法实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器/随机存取存储器、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种多屏交互方法,其特征在于,所述方法包括以下步骤:
根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息;
当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口;
基于所述显示窗口位于所述当前显示屏中的剩余窗口和所述扩展窗口构建整体跨屏窗口,并通过所述整体跨屏窗口对所述多媒体信息进行显示。
2.如权利要求1所述的多屏交互方法,其特征在于,所述当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口,包括:
判断所述显示窗口是否超出所述当前显示屏的边缘;
若是,则在所述当前显示屏的相邻显示屏中构建扩展窗口。
3.如权利要求2所述的多屏交互方法,其特征在于,所述若是,则在所述当前显示屏的相邻显示屏中构建扩展窗口,包括:
若是,则基于所述显示窗口以及位于所述当前显示屏中的剩余窗口,确定所述显示窗口超出所述当前显示屏的部分窗口;
隐藏所述部分窗口,并基于所述部分窗口在所述当前显示屏的相邻显示屏中构建扩展窗口,所述扩展窗口的尺寸与所述部分窗口相同。
4.如权利要求2或3所述的多屏交互方法,其特征在于,所述判断所述显示窗口是否超出所述当前显示屏的边缘之后,还包括:
若否,则隐藏所述显示窗口,并将所述多媒体信息显示在所述当前显示屏中。
5.如权利要求1所述的多屏交互方法,其特征在于,所述根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息之前,还包括:
读取显示屏参数,所述显示屏参数包括显示屏尺寸、显示屏分辨率;
基于所述显示屏参数将多媒体信号转换为多媒体信息。
6.如权利要求1所述的多屏交互方法,其特征在于,所述根据用户基于当前显示屏触发的触摸事件生成显示窗口,包括:
根据用户基于当前显示屏触发的触摸事件获取触摸点坐标;
根据所述触摸点坐标生成显示窗口。
7.如权利要求6所述的多屏交互方法,其特征在于,所述根据所述触摸点坐标生成显示窗口,包括:
标记以所述触摸点坐标为左上角点坐标、以预设长度为边长的封闭图形区域;
将所述封闭图形区域设定为显示窗口。
8.一种多屏交互装置,其特征在于,所述多屏交互装置包括:
窗口生成模块,用于根据用户基于当前显示屏触发的触摸事件生成显示窗口,并通过所述显示窗口显示对应的多媒体信息;
窗口扩展模块,用于当所述显示窗口超出所述当前显示屏的边缘时,在所述当前显示屏的相邻显示屏中构建扩展窗口;
信息显示模块,用于基于所述显示窗口位于所述当前显示屏中的剩余窗口和所述扩展窗口构建整体跨屏窗口,并通过所述整体跨屏窗口对所述多媒体信息进行显示。
9.一种多屏交互设备,其特征在于,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的多屏交互程序,所述多屏交互程序配置为实现如权利要求1至7中任一项所述的多屏交互方法的步骤。
10.一种存储介质,其特征在于,所述存储介质上存储有多屏交互程序,所述多屏交互程序被处理器执行时实现如权利要求1至7任一项所述的多屏交互方法的步骤。
CN202211293645.XA 2022-10-21 2022-10-21 多屏交互方法、装置、设备及存储介质 Pending CN115617295A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211293645.XA CN115617295A (zh) 2022-10-21 2022-10-21 多屏交互方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211293645.XA CN115617295A (zh) 2022-10-21 2022-10-21 多屏交互方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN115617295A true CN115617295A (zh) 2023-01-17

Family

ID=84865056

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211293645.XA Pending CN115617295A (zh) 2022-10-21 2022-10-21 多屏交互方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN115617295A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107153520A (zh) * 2017-05-08 2017-09-12 广州美凯信息技术股份有限公司 多屏协作控制方法、装置以及多屏管理系统
CN108829323A (zh) * 2018-06-22 2018-11-16 联想(北京)有限公司 信息处理方法、装置及电子设备
CN110007843A (zh) * 2018-01-04 2019-07-12 中兴通讯股份有限公司 触控显示的方法、终端及计算机可读存储介质
CN111580910A (zh) * 2020-05-08 2020-08-25 青岛海信医疗设备股份有限公司 一种窗体处理方法及装置
CN111679767A (zh) * 2013-08-26 2020-09-18 三星电子株式会社 窗口扩展方法和相关联的电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111679767A (zh) * 2013-08-26 2020-09-18 三星电子株式会社 窗口扩展方法和相关联的电子设备
CN107153520A (zh) * 2017-05-08 2017-09-12 广州美凯信息技术股份有限公司 多屏协作控制方法、装置以及多屏管理系统
CN110007843A (zh) * 2018-01-04 2019-07-12 中兴通讯股份有限公司 触控显示的方法、终端及计算机可读存储介质
CN108829323A (zh) * 2018-06-22 2018-11-16 联想(北京)有限公司 信息处理方法、装置及电子设备
CN111580910A (zh) * 2020-05-08 2020-08-25 青岛海信医疗设备股份有限公司 一种窗体处理方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"#华硕灵耀X#双屏的100种玩法-触控玩法", pages 1 - 2, Retrieved from the Internet <URL:http://www.bilibili.com/video/av207753433/> *

Similar Documents

Publication Publication Date Title
TWI484403B (zh) 顯示介面中之圖示管理
CN1177274C (zh) 用于重叠窗口的音频标识符的数据处理器控制的显示系统
JP5253937B2 (ja) 情報処理装置及びプログラム
JP5371305B2 (ja) コンピュータプログラム
CN104331246A (zh) 在终端中进行分屏显示的设备和方法
JP5249686B2 (ja) 情報処理装置及びプログラム
EP2367116A2 (en) Graph display apparatus, recording medium on which program is recorded and graph display method
US8448081B2 (en) Information processing apparatus
CN103502055A (zh) 信息显示处理装置
CN105122187A (zh) 组合显示面板电路
CN104978124A (zh) 一种终端展示图片的方法及终端
CN115617295A (zh) 多屏交互方法、装置、设备及存储介质
CN101118561A (zh) 演示设备和演示控制方法
CN110868503A (zh) 显示装置、显示方法以及程序
JP5509757B2 (ja) 情報処理装置、表示制御方法およびプログラム
CN107423013B (zh) 一种数据显示方法、装置及电子设备
JP2007079947A (ja) 表示装置及びそれに用いるプログラム
KR101641063B1 (ko) 단말 제어 장치 및 방법
JP4765893B2 (ja) タッチパネル搭載装置、外部装置、及び外部装置の操作方法
JP6720387B2 (ja) コンテンツ表示装置、コンテンツ表示方法及びプログラム
EP3547099B1 (en) Information processing device and information processing method
JP5266809B2 (ja) 表示モード切替方法
WO2001082285A1 (fr) Commande d&#39;affichage de superpositions
JPH09237175A (ja) スクロール制御装置
JPH10207330A (ja) コンピュータを用いた学習システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination