CN107329717A - 一种屏幕显示信息的处理方法、显示方法和显示系统 - Google Patents
一种屏幕显示信息的处理方法、显示方法和显示系统 Download PDFInfo
- Publication number
- CN107329717A CN107329717A CN201710446409.XA CN201710446409A CN107329717A CN 107329717 A CN107329717 A CN 107329717A CN 201710446409 A CN201710446409 A CN 201710446409A CN 107329717 A CN107329717 A CN 107329717A
- Authority
- CN
- China
- Prior art keywords
- information
- display screen
- screen
- display
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 37
- 230000000875 corresponding Effects 0.000 claims abstract description 118
- 230000004044 response Effects 0.000 claims abstract description 101
- 238000004891 communication Methods 0.000 claims description 32
- 230000001960 triggered Effects 0.000 claims description 28
- 230000005540 biological transmission Effects 0.000 claims description 26
- 238000000034 method Methods 0.000 claims description 23
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 230000005484 gravity Effects 0.000 claims description 4
- 235000013399 edible fruits Nutrition 0.000 claims description 2
- 230000001360 synchronised Effects 0.000 description 7
- 238000005457 optimization Methods 0.000 description 5
- 238000003860 storage Methods 0.000 description 5
- 229920001276 Ammonium polyphosphate Polymers 0.000 description 4
- 230000006399 behavior Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000001808 coupling Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000006011 modification reaction Methods 0.000 description 2
- 239000011800 void material Substances 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- WHXSMMKQMYFTQS-UHFFFAOYSA-N lithium Chemical compound data:image/svg+xml;base64,PD94bWwgdmVyc2lvbj0nMS4wJyBlbmNvZGluZz0naXNvLTg4NTktMSc/Pgo8c3ZnIHZlcnNpb249JzEuMScgYmFzZVByb2ZpbGU9J2Z1bGwnCiAgICAgICAgICAgICAgeG1sbnM9J2h0dHA6Ly93d3cudzMub3JnLzIwMDAvc3ZnJwogICAgICAgICAgICAgICAgICAgICAgeG1sbnM6cmRraXQ9J2h0dHA6Ly93d3cucmRraXQub3JnL3htbCcKICAgICAgICAgICAgICAgICAgICAgIHhtbG5zOnhsaW5rPSdodHRwOi8vd3d3LnczLm9yZy8xOTk5L3hsaW5rJwogICAgICAgICAgICAgICAgICB4bWw6c3BhY2U9J3ByZXNlcnZlJwp3aWR0aD0nMzAwcHgnIGhlaWdodD0nMzAwcHgnIHZpZXdCb3g9JzAgMCAzMDAgMzAwJz4KPCEtLSBFTkQgT0YgSEVBREVSIC0tPgo8cmVjdCBzdHlsZT0nb3BhY2l0eToxLjA7ZmlsbDojRkZGRkZGO3N0cm9rZTpub25lJyB3aWR0aD0nMzAwLjAnIGhlaWdodD0nMzAwLjAnIHg9JzAuMCcgeT0nMC4wJz4gPC9yZWN0Pgo8dGV4dCB4PScxMzguMCcgeT0nMTcwLjAnIGNsYXNzPSdhdG9tLTAnIHN0eWxlPSdmb250LXNpemU6NDBweDtmb250LXN0eWxlOm5vcm1hbDtmb250LXdlaWdodDpub3JtYWw7ZmlsbC1vcGFjaXR5OjE7c3Ryb2tlOm5vbmU7Zm9udC1mYW1pbHk6c2Fucy1zZXJpZjt0ZXh0LWFuY2hvcjpzdGFydDtmaWxsOiMzQjQxNDMnID5MPC90ZXh0Pgo8dGV4dCB4PScxNjUuNicgeT0nMTcwLjAnIGNsYXNzPSdhdG9tLTAnIHN0eWxlPSdmb250LXNpemU6NDBweDtmb250LXN0eWxlOm5vcm1hbDtmb250LXdlaWdodDpub3JtYWw7ZmlsbC1vcGFjaXR5OjE7c3Ryb2tlOm5vbmU7Zm9udC1mYW1pbHk6c2Fucy1zZXJpZjt0ZXh0LWFuY2hvcjpzdGFydDtmaWxsOiMzQjQxNDMnID5pPC90ZXh0Pgo8cGF0aCBkPSdNIDE4MC4zLDE1MC4wIEwgMTgwLjMsMTQ5LjggTCAxODAuMywxNDkuNyBMIDE4MC4zLDE0OS41IEwgMTgwLjIsMTQ5LjMgTCAxODAuMiwxNDkuMiBMIDE4MC4xLDE0OS4wIEwgMTgwLjAsMTQ4LjkgTCAxNzkuOSwxNDguNyBMIDE3OS44LDE0OC42IEwgMTc5LjcsMTQ4LjUgTCAxNzkuNSwxNDguNCBMIDE3OS40LDE0OC4zIEwgMTc5LjIsMTQ4LjIgTCAxNzkuMSwxNDguMSBMIDE3OC45LDE0OC4xIEwgMTc4LjcsMTQ4LjAgTCAxNzguNiwxNDguMCBMIDE3OC40LDE0OC4wIEwgMTc4LjIsMTQ4LjAgTCAxNzguMCwxNDguMCBMIDE3Ny45LDE0OC4xIEwgMTc3LjcsMTQ4LjEgTCAxNzcuNiwxNDguMiBMIDE3Ny40LDE0OC4yIEwgMTc3LjMsMTQ4LjMgTCAxNzcuMSwxNDguNCBMIDE3Ny4wLDE0OC41IEwgMTc2LjksMTQ4LjcgTCAxNzYuOCwxNDguOCBMIDE3Ni43LDE0OC45IEwgMTc2LjYsMTQ5LjEgTCAxNzYuNSwxNDkuMiBMIDE3Ni40LDE0OS40IEwgMTc2LjQsMTQ5LjYgTCAxNzYuNCwxNDkuNyBMIDE3Ni4zLDE0OS45IEwgMTc2LjMsMTUwLjEgTCAxNzYuNCwxNTAuMyBMIDE3Ni40LDE1MC40IEwgMTc2LjQsMTUwLjYgTCAxNzYuNSwxNTAuOCBMIDE3Ni42LDE1MC45IEwgMTc2LjcsMTUxLjEgTCAxNzYuOCwxNTEuMiBMIDE3Ni45LDE1MS4zIEwgMTc3LjAsMTUxLjUgTCAxNzcuMSwxNTEuNiBMIDE3Ny4zLDE1MS43IEwgMTc3LjQsMTUxLjggTCAxNzcuNiwxNTEuOCBMIDE3Ny43LDE1MS45IEwgMTc3LjksMTUxLjkgTCAxNzguMCwxNTIuMCBMIDE3OC4yLDE1Mi4wIEwgMTc4LjQsMTUyLjAgTCAxNzguNiwxNTIuMCBMIDE3OC43LDE1Mi4wIEwgMTc4LjksMTUxLjkgTCAxNzkuMSwxNTEuOSBMIDE3OS4yLDE1MS44IEwgMTc5LjQsMTUxLjcgTCAxNzkuNSwxNTEuNiBMIDE3OS43LDE1MS41IEwgMTc5LjgsMTUxLjQgTCAxNzkuOSwxNTEuMyBMIDE4MC4wLDE1MS4xIEwgMTgwLjEsMTUxLjAgTCAxODAuMiwxNTAuOCBMIDE4MC4yLDE1MC43IEwgMTgwLjMsMTUwLjUgTCAxODAuMywxNTAuMyBMIDE4MC4zLDE1MC4yIEwgMTgwLjMsMTUwLjAgTCAxNzguMywxNTAuMCBaJyBzdHlsZT0nZmlsbDojMDAwMDAwO2ZpbGwtcnVsZTpldmVub2RkO2ZpbGwtb3BhY2l0eToxO3N0cm9rZTojMDAwMDAwO3N0cm9rZS13aWR0aDowLjBweDtzdHJva2UtbGluZWNhcDpidXR0O3N0cm9rZS1saW5lam9pbjptaXRlcjtzdHJva2Utb3BhY2l0eToxOycgLz4KPC9zdmc+Cg== data:image/svg+xml;base64,PD94bWwgdmVyc2lvbj0nMS4wJyBlbmNvZGluZz0naXNvLTg4NTktMSc/Pgo8c3ZnIHZlcnNpb249JzEuMScgYmFzZVByb2ZpbGU9J2Z1bGwnCiAgICAgICAgICAgICAgeG1sbnM9J2h0dHA6Ly93d3cudzMub3JnLzIwMDAvc3ZnJwogICAgICAgICAgICAgICAgICAgICAgeG1sbnM6cmRraXQ9J2h0dHA6Ly93d3cucmRraXQub3JnL3htbCcKICAgICAgICAgICAgICAgICAgICAgIHhtbG5zOnhsaW5rPSdodHRwOi8vd3d3LnczLm9yZy8xOTk5L3hsaW5rJwogICAgICAgICAgICAgICAgICB4bWw6c3BhY2U9J3ByZXNlcnZlJwp3aWR0aD0nODVweCcgaGVpZ2h0PSc4NXB4JyB2aWV3Qm94PScwIDAgODUgODUnPgo8IS0tIEVORCBPRiBIRUFERVIgLS0+CjxyZWN0IHN0eWxlPSdvcGFjaXR5OjEuMDtmaWxsOiNGRkZGRkY7c3Ryb2tlOm5vbmUnIHdpZHRoPSc4NS4wJyBoZWlnaHQ9Jzg1LjAnIHg9JzAuMCcgeT0nMC4wJz4gPC9yZWN0Pgo8dGV4dCB4PSczNS4wJyB5PSc1My42JyBjbGFzcz0nYXRvbS0wJyBzdHlsZT0nZm9udC1zaXplOjIzcHg7Zm9udC1zdHlsZTpub3JtYWw7Zm9udC13ZWlnaHQ6bm9ybWFsO2ZpbGwtb3BhY2l0eToxO3N0cm9rZTpub25lO2ZvbnQtZmFtaWx5OnNhbnMtc2VyaWY7dGV4dC1hbmNob3I6c3RhcnQ7ZmlsbDojM0I0MTQzJyA+TDwvdGV4dD4KPHRleHQgeD0nNTEuMCcgeT0nNTMuNicgY2xhc3M9J2F0b20tMCcgc3R5bGU9J2ZvbnQtc2l6ZToyM3B4O2ZvbnQtc3R5bGU6bm9ybWFsO2ZvbnQtd2VpZ2h0Om5vcm1hbDtmaWxsLW9wYWNpdHk6MTtzdHJva2U6bm9uZTtmb250LWZhbWlseTpzYW5zLXNlcmlmO3RleHQtYW5jaG9yOnN0YXJ0O2ZpbGw6IzNCNDE0MycgPmk8L3RleHQ+CjxwYXRoIGQ9J00gNjEuMiw0Mi4wIEwgNjEuMiw0MS45IEwgNjEuMiw0MS44IEwgNjEuMiw0MS43IEwgNjEuMiw0MS42IEwgNjEuMSw0MS41IEwgNjEuMSw0MS40IEwgNjEuMCw0MS4zIEwgNjEuMCw0MS4zIEwgNjAuOSw0MS4yIEwgNjAuOCw0MS4xIEwgNjAuNyw0MS4xIEwgNjAuNyw0MS4wIEwgNjAuNiw0MS4wIEwgNjAuNSw0MC45IEwgNjAuNCw0MC45IEwgNjAuMyw0MC45IEwgNjAuMiw0MC44IEwgNjAuMSw0MC44IEwgNjAuMCw0MC44IEwgNTkuOSw0MC45IEwgNTkuOCw0MC45IEwgNTkuNyw0MC45IEwgNTkuNiw0MC45IEwgNTkuNSw0MS4wIEwgNTkuNCw0MS4wIEwgNTkuNCw0MS4xIEwgNTkuMyw0MS4yIEwgNTkuMiw0MS4yIEwgNTkuMSw0MS4zIEwgNTkuMSw0MS40IEwgNTkuMCw0MS41IEwgNTkuMCw0MS42IEwgNTkuMCw0MS43IEwgNTguOSw0MS44IEwgNTguOSw0MS45IEwgNTguOSw0Mi4wIEwgNTguOSw0Mi4wIEwgNTguOSw0Mi4xIEwgNTguOSw0Mi4yIEwgNTkuMCw0Mi4zIEwgNTkuMCw0Mi40IEwgNTkuMCw0Mi41IEwgNTkuMSw0Mi42IEwgNTkuMSw0Mi43IEwgNTkuMiw0Mi44IEwgNTkuMyw0Mi44IEwgNTkuNCw0Mi45IEwgNTkuNCw0My4wIEwgNTkuNSw0My4wIEwgNTkuNiw0My4xIEwgNTkuNyw0My4xIEwgNTkuOCw0My4xIEwgNTkuOSw0My4xIEwgNjAuMCw0My4yIEwgNjAuMSw0My4yIEwgNjAuMiw0My4yIEwgNjAuMyw0My4xIEwgNjAuNCw0My4xIEwgNjAuNSw0My4xIEwgNjAuNiw0My4wIEwgNjAuNyw0My4wIEwgNjAuNyw0Mi45IEwgNjAuOCw0Mi45IEwgNjAuOSw0Mi44IEwgNjEuMCw0Mi43IEwgNjEuMCw0Mi43IEwgNjEuMSw0Mi42IEwgNjEuMSw0Mi41IEwgNjEuMiw0Mi40IEwgNjEuMiw0Mi4zIEwgNjEuMiw0Mi4yIEwgNjEuMiw0Mi4xIEwgNjEuMiw0Mi4wIEwgNjAuMSw0Mi4wIFonIHN0eWxlPSdmaWxsOiMwMDAwMDA7ZmlsbC1ydWxlOmV2ZW5vZGQ7ZmlsbC1vcGFjaXR5OjE7c3Ryb2tlOiMwMDAwMDA7c3Ryb2tlLXdpZHRoOjAuMHB4O3N0cm9rZS1saW5lY2FwOmJ1dHQ7c3Ryb2tlLWxpbmVqb2luOm1pdGVyO3N0cm9rZS1vcGFjaXR5OjE7JyAvPgo8L3N2Zz4K [Li] WHXSMMKQMYFTQS-UHFFFAOYSA-N 0.000 description 1
- 229910052744 lithium Inorganic materials 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000002093 peripheral Effects 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
Abstract
本发明提供了一种屏幕显示信息的处理方法、显示方法和显示系统,上述处理方法应用于与外接设备连接的移动终端,移动终端具有第一显示屏,用于显示移动终端的第一主界面信息;外接设备具有第二显示屏,第一显示屏的屏幕尺寸大于第二显示屏的屏幕尺寸,包括将独立于第一主界面信息的第二主界面信息发送到外接设备的第二显示屏中进行显示,当用户对任一个显示屏的主界面程序界面进行操作时,响应用户的操作指令,将响应上述操作指令后得到的响应结果,发送至上述操作指令对应的显示屏处进行显示;其使得用户可以同时在移动终端和外接设备上进行不同的操作,满足了用户同时通过外接设备和移动终端运行不同应用程序的需求。
Description
一种屏幕显示信息的处理方法、显示方法和显示系统
技术领域
[0001]本发明涉及通信技术领域,具体而言,涉及一种屏幕显示信息的处理方法、显示方 法和显不系统。
背景技术
[0002]随着信息技术的迅猛发展,移动终端已成为用户随身携带的工具。目前,移动终端 对于用户来讲,其不仅作为用户的通信工具,还能作为用户的商务工具、休息娱乐工具等, 包括更多的性能以提供给更多的服务给客户,如用户利用移动终端看电影、玩游戏、上网等 操作。然而,智能移动终端受随身携带、单手操作等因素的影响,其主流屏幕需局限在4.0至 6.0英寸之间,这使得用户利用移动终端进行娱乐或者办公时,常常因为屏幕尺寸过小而不 能得到很好的操作体验和视觉体验。
[0003]为了改善上述问题,市场上出现了独立于移动终端的屏幕较大的平板电脑,其屏 幕尺寸大于移动终端屏幕尺寸并且还兼顾用户携带方便的特点。但是,目前的大多数平板 电脑的硬件性能均能够与现主流移动终端性能相匹配,这使得平板电脑价格普遍较高,而 较少数硬件性能低于现主流移动终端性能的平板电脑价格相对便宜,但是其无法满足用户 的需求。
[0004]基于上述问题,相关技术提供了 一种外接设备,该外接设备的尺寸匹配上述平板 电脑的尺寸,即彳两足大于移动终端屏幕尺寸并且还兼顾用户携带方便的特点;该外设设备 用于配合移动终端使用,其在连接移动终端后,同步显示移动终端的内容,用户可以根据外 接设备显示的内容进行操作,对应于用户的操作,上述外接设备基于移动终端的性能对用 户的操作进行处理,并显示处理结果。上述外接设备的大部分主流性能是依赖于移动终端 的性能,因此,成本低且能够满足用户的需求。
[0005]但是,发明人在研究中发现上述外接设备至少存在以下问题:其只能同步移动终 端的运行应用程序以及显示该运行应用程序对应的显示画面,而无法独立运行移动终端的 应用程序,这无法满足用户同时通过外接设备和移动终端运行不同应用程序的需求。
发明内容
[0006]有鉴于此,本发明实施例的目的在于提供一种屏幕显示信息的处理方法、显示方 法和显示系统,能够使用户同时在移动终端和外接设备上进行不同的操作,满足了用户同 时通过外接设备和移动终端运行不同应用程序的需求。
[0007]第一方面,本发明实施例提供了一种屏幕显示信息的处理方法,所述方法应用于 与外接设备通信连接的移动终端,移动终端具有第一显示屏,第一显示屏用于显示移动终 端的第一主界面信息;第一主界面信息包括:第一主界面程序界面和应用程序图标;外接设 备具有第二显示屏,第一显示屏的屏幕尺寸大于第二显示屏的屏幕尺寸;所述方法包括: [0008]在检测到外接设备接入时,获取移动终端中的第二主界面程序和应用程序;
[0009]对第二主界面程序和应用程序进行处理,得到第二主界面信息;第二主界面信息 包括:第二主界面程序界面和应用程序图标;
[0010] 将第二主界面信息发送至外接设备,以便在外接设备的第二显示屏上显示第二主 界面信息;
[0011]当接收到在任一个主界面程序界面上触发的第一操作指令后,响应该第一操作指 令,并确定该第一操作指令对应的显示屏信息;其中,该操作指令对应的显示屏信息是指用 户触发该操作指令所使用的显示屏的信息;显示屏为第一显示屏或者第二显示屏;
[0012] 将响应第一操作指令后得到的响应结果,发送至确定的显示屏信息对应的显示屏 处进行显示。
[0013] 结合第一方面,本发明实施例提供了第一方面的第一种可能的实施方式,其中,应 用程序图标在第一主界面程序界面或者第二主界面程序界面上显示,第一操作指令包括用 户在任一主界面程序界面上显示的应用程序的图标触发的操作指令,第一操作指令对应的 响应结果为应用程序的图标对应的应用程序界面,所述方法还包括:
[0014] 将应用程序的图标对应的应用程序界面发送至确定的显示屏信息对应的显示屏 处进行显示;
[0015] 当接收到在应用程序界面上触发的第二操作指令后,响应第二操作指令,并确定 第二操作指令对应的显示屏信息;其中,第二操作指令对应的显示屏信息是指用户触发该 操作指令所使用的显示屏的信息;显示屏为第一显示屏或者第二显示屏;
[0016]将响应第二操作指令后得到的响应结果,发送至确定的显示屏信息对应的显示屏 处进行显示;响应结果显示在应用程序界面中。
[0017]结合第一方面的第一种可能的实施方式,本发明实施例提供了第一方面的第二种 可能的实施方式,其中,第二操作指令包括:在应用程序界面上触发的音频文件播放请求; 所述方法包括:
[0018]当接收到在应用程序界面上触发的音频文件播放请求后,响应该音频文件播放请 求,并确定该音频文件播放请求对应的显示屏信息;其中,该音频文件播放请求对应的显示 屏信息是指用户触发该音频文件播放请求所使用的显示屏的信息;显示屏为第一显示屏或 者第二显示屏;
[0019]将响应于音频文件播放请求后得到的音频文件发送至显示屏的信息所对应的显 示屏处进行播放。
[0020]结合第一方面的第二种可能的实施方式,本发明实施例提供了第一方面的第三种 可能的实施方式,其中,所述方法还包括:获取外接设备的第二显示屏显示的应用程序图标 的弟一标识伯息和外接设备的第二标识信息,建立第一标识信息和第二标识信息的对应关 系,并存储对应关系;
[0021 ]确定该音频文件播放请求所对应的显示屏的信息,包括:
[0022]获取音频文件所属的应用程序的第一待识别标识信息;
[0023]判断第一待识别标识信息是否与第一标识信息相同;
[0024] ,•弟一'待识别标识彳目息与弟一标识伯息相同时,根据第一标识信息与第二标识信 息的对应关系,确定音频文件所对应的显示屏为第二显示屏。
[00&25]、结合第一方面的第二种可能的实施方式,本发明实施例提供了第一方面的第四种 可能的实施方式,其中,当在外接设备的第二显示屏显示的应用程序界面上触发所述音频 文件播放请求时,所述当接收到在应用程序界面上触发的音频文件播放请求后,响应该音 频文件播放请求,包括:
[0026]当接收到在外接设备的第二显示屏显示的应用程序界面上触发的音频文件播放 请求后,获取所述音频文件播放请求的触控位置信息;
[0027]对所述触控位置信息进行坐标转换,根据坐标转换结果识别所述触控位置信息对 应的应用程序;
[0028]获取识别的所述应用程序,从识别的所述应用程序中获取所述音频文件。
[0029]结合第一方面,本发明实施例提供了第一方面的第五种可能的实施方式,其中,对 第二主界面程序界面和应用程序图标进行处理,包括:
[0030]获取外接设备的外接屏参数;外接屏参数至少包括:屏幕分辨率和每英寸点数 DPI;
[0031] 根据屏幕分辨率和DPI,对第二主界面程序界面和应用程序图标进行处理,以使得 处理后的第二主界面信息能够显示在外接设备的第二显示屏中;
[0032]将处理后的第二主界面信息发送至外接设备的第二显示屏中进行显示。
[0033]结合第一方面,本发明实施例提供了第一方面的第六种可能的实施方式,其中,将 第二主界面信息发送至外接设备,以便在外接设备的第二显示屏上显示第二主界面信息, 包括:
[0034] 对第二主界面信息进行压缩编码处理;
[0035] 将编码后的第二主界面信息发送至外接设备,以便外接设备对编码后的第二主界 面信息进行解码处理并显示解码后的第二主界面信息。
[0036]结合第一方面,本发明实施例提供了第一方面的第七种可能的实施方式,其中,确 定该第一操作指令对应的显示屏信息,包括:
[0037]获取第一操作指令中携带的第二待识别标识信息;
[0038]判断第二待识别标识信息是否与预存的第一主界面程序界面的第一标准标识信 息和预存的第二主界面程序界面的第二标准标识信息相同;第一标准标识信息和第二标准 标识信息不同;
[0039]若第二待识别标识信息与第一标准标识信息相同,确定第一操作指令对应第一显 示屏;
[0040] 若第二待识别标识信息与第二标准标识信息相同,确定第一操作指令对应第二显 示屏。
[0041]结合第一方面,第一方面的第一种可能的实施方式至第一方面的第七种可能的实 施方式,本发明实施例提供了第一方面的第八种可能的实施方式,其中,响应结果包括:视 频数据和/或音频数据;将响应第一操作指令后得到的响应结果,发送至确定的显示屏信息 对应的显示屏处进行显示,包括:
[0042]当确定第一操作指令对应的显示屏信息为第二显示屏时,对视频数据进行压缩编 码处理,将编码后的视频数据传输到外接设备,以便外接设备对编码后的视频数据进行解 码处理并显示解码后的视频数据;
[0043]和/或,当确定第一操作指令对应的显示屏信息为第二显示屏时,调用指定传输通 道将音频数据传输到外接设备,以便外接设备控制第二显不屏显示音频数据。 LQ〇44」合弟一万面,第一方面的第一种可能的实施方式至第一方面的第七种可能的实 施方式,本发明实施例提供了第一方面的第九种可能的实施方式,其中,第一操作指令还包 括旋屏指令,该旋屏指令为外接设备根据重力传感器传输的重力信号生成的;第一操作指 令对应的响应结果显示在确定的显示屏信息对应的显示屏的主界面程序界面中。
[0045]结合第一方面,本发明实施例提供了第一方面的第十种可能的实施方式,其中,移 动终端上设置有通信接口;所述方法还包括:
[0046]监听通信接口的状态信息;
[0047]在检测到通信接口的状态为插入状态时,判断是否接收到外接设备的第二标识信 息;
[0048]若是,确定通信接口接入外接设备。
[0049] 本发明实施例提供的一种屏幕显示信息的处理方法,该方法应用于与外接设备连 接的移动终端,上述移动终端具有第一显示屏,第一显示屏用于显示移动终端的第一主界 面信息;上述外接设备具有第二显示屏,第一显示屏的屏幕尺寸大于第二显示屏的屏幕尺 寸,该方法采用将独立于第一主界面信息的第二主界面信息发送到外接设备的第二显示屏 上进行显示,当用户对任一个显示屏的主界面程序界面进行操作时,响应用户的操作指令, 将响应上述操作指令后得到的响应结果,发送至上述操作指令对应的显示屏处进行显示, 与现有技术中的外接设备只能同步移动终端当前屏幕信息,而无法独立运行移动终端的屏 幕信息相比,其在外接设备接入移动终端时,使外接设备能够显示独立于移动终端的第一 主界面信息的第二主界面信息,且能够对用户任一主界面程序界面上的操作进行响应处理 并向响应对象反馈响应结果,使得用户可以同时在移动终端和外接设备上进行不同的操 作,满足了用户同时通过外接设备和移动终端运行不同应用程序的需求。
[0050] 第二方面,本发明实施例还提供了一种屏幕显示信息的显示方法,该方法应用于 与移动终端通信连接的外接设备,移动终端具有第一显示屏,第一显示屏用于显示移动终 端的第一主界面信息;第一主界面信息包括:第一主界面程序界面和应用程序图标;外接设 备具有第二显示屏,第一显示屏的屏幕尺寸大于第二显示屏的屏幕尺寸;该方法包括:
[0051]在接入移动终端后,接收移动终端发送的第二主界面信息,在第二显示屏上显示 第二主界面信息;第二主界面信息包括:第二主界面程序界面和显示在第二主界面程序界 面上的应用程序图标;
[0052]在监听到第二显示屏显示的第二主界面程序界面上的控制操作时,生成与控制操 作对应的第一控制指令;
[0053]将第一控制指令发送至移动终端,以使移动终端响应于第一控制指令;
[0054]接收移动终端发送的响应于第一控制指令的响应结果,显示响应结果。
[0055]结合第二方面,本发明实施例提供了第二方面的第一种可能的实施方式,其中,接 收移动终端发送的第二主界面信息,包括:
[0056]接收移动终端发送的编码后的第二主界面信息;
[0057]对编码后的第二主界面信息进行解码处理,显示解码后的主界面信息。
[0058]结合第二方面,本发明实施例提供了第二方面的第二种可能的实施方式,其中,第 一控制指令为用户针对显示在第二主界面程序界面上的应用程序图标触发的第三操作指 令;或者第一控制指令为旋屏指令;
[0059]当第一控制指令为第三操作指令时,接收移动终端发送的响应于第一控制指令的 响应结果,包括:
[0060]接收移动终端发送的触发操作的应用程序的图标对应的应用程序界面。
[0061]结合第二方面的第二种可能的实施方式,本发明实施例提供了第二方面的第三种 可能的实施方式,其中,所述方法还包括:
[0062]在监听到第二显示屏显示的应用程序界面上的控制操作时,生成与控制操作对应 的第二控制指令;
[0063]将第二控制指令发送至移动终端,以使移动终端响应于第二控制指令;
[00M]接收移动终端发送的响应于第二控制指令的响应结果,显示响应结果;响应结果 包括:视频数据和/或音频数据。
[°065]本发明实施例提供的一种屏幕显示信息的显示方法,该方法应用于与移动终端通 信连接的外接设备,上述移动终端具有第一显示屏,第一显示屏用于显示移动终端的第一 主界面信息;上述外接设备具有第二显示屏,第一显示屏的屏幕尺寸大于第二显示屏的屏 幕尺寸,该方法采用接收并显不移动终端发送第二主界面信息,根据用户输入的控制操作, 向移动终端发送对应的控制指令,以使移动终端响应于该控制指令;接收并显示移动终端 的响应于上述控制指令的响应结果,与现有技术中的外接设备只能同步移动终端的屏 幕信而无法独立于移动终端的屏幕信息相比,其在接入移动终端后,接收移动终端显示 的独立于移动终端显不的第一主界面信息的第二主界面信息,同时根据用户输入的控制操 作,响应给用户控制操作的反馈结果,使得用户可以同时在移动终端和外接设备上进行不 同的操作,满足了用户同时通过外接设备和移动终端运行不同应用程序的需求。
[0066]第三方面,f发明实施例还提供了一种屏幕显示信息的显示系统,包括:如第一方 面任一项的屏,显示信息p处理方法处理屏幕显示信息的移动终端和如应用第二方面任 一项的屏幕显7F信息的显不方法显示屏幕显示信息的外接设备;所述移动终端和所述外接 设备通信连接。
[00^7]本发明实施例提供的一种屏幕显不信息的显示系统,包括移动终端和与移动终端 通{曰连接的外接设备,上述移动终端具有第一显示屏,第一显示屏用于显示移动终端的第 一 ^界面信息、;上述外接设备具^第二显示屏,第一显示屏的屏幕尺寸大于第二显示屏的 屏#尺寸,该方法采用接收并显不移动终端发送第二主界面信息,根据用户输入的控制操 向移动终端发送对应的控制指令,以使移动终端响应于该控制指令;接收并显示移动终 端发$的响应于上述控制指令的响应结果,与现有技术中的外接设备只能同步移动终端的 ^幕信肩而无法独立于^动终端的屏幕信息相比,其在接入移动终端后,接收移动终端显 ^的独立于移动终端显示的第一主界面信息的第二主界面信息,同时根据用户输入 <的控制 操作,响应给用户控制操作的反馈结果,使得用户可以同时在移动终端和外接设备上进行 不同的操作,满足了用户同时通过外接设备和移动终端运行不同应用程序的需求。
[0068] 为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例并配八 所附附图,作详细说明如下。 ’ n
附图说明
[0069] 为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附 图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对 范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这 些附图获得其他相关的附图。
[0070] 图1示出了本发明实施例所提供的一种屏幕显示信息的处理方法的流程图;
[0071] 图2示出了本发明实施例所提供的另一种屏幕显示信息的处理方法的流程图;
[0072] 图3示出了本发明实施例所提供的另一种屏幕显示信息的处理方法的流程图;
[0073] 图4a示出了本发明实施例所提供的一种移动终端对音频文件进行处理的流程图;
[0074] 图4b示出了本发明实施例所提供的另一种移动终端对音频文件进行处理的流程 图;
[0075] 图5示出了本发明实施例所提供的另一种屏幕显示信息的处理方法的流程图;
[0076] 图6示出了本发明实施例所提供的另一种屏幕显示信息的处理方法的流程图;
[0077] 图7示出了本发明实施例所提供的另一种屏幕显示信息的处理方法的流程图; [0078]图8示出了本发明实施例所提供的一种屏幕显示信息的显示方法的流程图;
[0079]图9示出了本发明实施例所提供的另一种屏幕显示信息的显示方法的流程图; [0080]图10示出了本发明实施例所提供的一种屏幕显示信息的显示系统的结构示意图。
具体实施方式
[0081]为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例 中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅 是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实 施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的 实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实 施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所 有其他实施例,都属于本发明保护的范围。
[0082]考虑到现有技术中的外接设备只能同步移动终端的运行应用程序以及显示该运 行应用程序对应的显示画面,而无法独立运行移动终端的应用程序,这无法满足用户同时 通过外接设备和移动终端运行不同应用程序的需求的问题,本发明实施例提供了一种屏幕 显示信息的处理方法、显示方法和显示系统,下面通过实施例进行描述。
[0083]本发明实施例提供了一种屏幕显示信息的处理方法,所述方法应用于与外接设备 通信连接的移动终端,所述移动终端具有第一显示屏,所述第一显示屏用于显示所述移动 终端的第一主界面信息;所述第一主界面信息包括:第一主界面程序界面和在第一主界面 程序界面上显示的应用程序图标;所述外接设备具有第二显示屏,所述第一显示屏的屏幕 尺寸大于所述第二显示屏的屏幕尺寸;参考图1,所述方法包括:
[0084] S101、在检测到所述外接设备接入时,获取所述移动终端中的第二主界面程序和 所述应用程序。
[0085]具体的,移动终端中预先嵌入操作系统(简称AnOS操作系统),该AnOS操作系统是 基于Android内核的移动终端操作系统,是功能实现的核心,针对移动终端和外接设备的多 前台的需求,对Android中framework层进行深入开发与优化。从视频、音频和触控三个功能 点触发,落至ActivityManager (活动管理模块)、WindowManager (窗口管理模块)、 DisplayManager (显示管理模块)、SurfaceFlinger (帧缓存管理模块)、InputFlinger (输入 管理模块)、AudioFlinger (音频管理模块)、Libmedia (多媒体库)、AudioSerViCe (音频服务 模块)几个模块内,进行开发优化。
[0086]并且,在对A n d r 〇 i d的上述模块进行修改的同时,新增系统服务 (ExternalDisplayService),该系统服务用于持续监听外接设备的连接状况、注册外接设 备对应的外接虚拟显示屏和对应于该外接虚拟显示屏的活动栈;同时,还新增了应用服务 (ExternalCommunicator),作用是与外接设备连接移动终端软件程序类似,g卩启动三个线 程来与外接设备(也可以称为扩展平板)进行视频、音频和触控信号的数据交换。
[0087]具体的,移动终端启动时,创建原始虚拟显示屏Display。,并基于该虚拟显示屏创 建任务找(包括主界面任务找也1116513〇1<:和应用程序任务栈?11118(^6611?0〖1<:8卩8。63丨8〇1〇。 通过创建的原始虚拟显示屏和两个任务栈在第一显示屏上显示移动终端的主界面信息以 及主界面上的应用程序图标的应用程序界面及该应用程序界面中的相关显示数据,该相关 显示数据包括视频数据、音频数据和触摸信号。
[0088] 而在移动终端中接入外接设备后,通过系统服务(ExternalDisplayService)和修 改后的DisplayManager,创建外接虚拟显示屏Displayi,并基于该外接虚拟显示屏创建外 接任务找(包括外接主界面任务栈ExternalHomeStacki和外接应用程序任务梭 ExternalFullscreenWorkspaceStacki)。通过创建的外接虚拟显示屏、两个外接任务枝和 新增的应用服务®xternalCommunicator)实现在第二显示屏上显示移动终端的主界面信 息以及主界面上的应用程序图标的应用程序界面及该应用程序界面中的相关显示数据,该 相关显示数据包括视频数据、音频数据和触摸信号。
[0089]另外,本发明实施例还新增了一个专用于外接设备的Launcher (该Launcher为上 述第二主界面程序),该Launcher本身跑在外接主界面任务找ExternalHomeStacki中,因 此,其画面进会显示在外接设备的第二显示屏上,并且由其启动的应用程序(即APP)也会直 接放入外接应用程序任务枝ExternalFullscreenWorkspaceStacki中,同时,将外接设备的 第二显示屏的焦点置于外接应用程序任务找ExternalFullscreenWorkspaceStacki上,外 接设备的第二显示屏便会显示启动的APP的内容。
[0090] 具体的,通过外接虚拟显示屏获取第二主界面程序和所述应用程序。
[0091] S102、对所述第二主界面程序界面和所述应用程序图标进行处理,得到第二主界 面伯息。
[0092] 具体的,在外接虚拟显示屏获取第二主界面程序和应用程序后,通过优化后的 ActivityManager (活动管理模块)、WindowManager (窗口管理模块)、DisplayManager (显示 管理模块)、SurfaceFlinger (巾贞缓存管理模块)和InputFlinger (输入管理模块)对上述第 二主界面程序和应用程序进行处理,得到第二主界面信息。其中,第二主界面信息包括:第 二主界面程序界面和在该第二主界面程序界面上显示的应用程序图标。
[0093] S103、将所述第二主界面信息发送至所述外接设备,以便在所述外接设备的第二 显示屏上显示所述第二主界面信息。
[0094] 具体的,移动终端启动上述Launcher,该Launcher使上述第二主界面信息运行在 外接主界面任务栈ExternalHomeStacki中,然后由通过新增的应用服务 (ExternalCommunicator)调用Android中的编码器对第二主界面信息进行编码处理,然后 将编码后的数据通过设定的传输通道发送给外接设备,以便外接设备接收该编码后的数据 并进行解码,并显示解码后的第二主界面信息。
[0095] S104、当接收到在任一个主界面程序界面上触发的第一操作指令后,响应该第一 操作指令,并确定该第一操作指令对应的显示屏信息;其中,该操作指令对应的显示屏信息 是指用户触发该操作指令所使用的显示屏的信息;所述显示屏为第一显示屏或者第二显示 屏。
[0096]具体的,移动终端的第一显示屏用于显示第一主界面信息,外接设备的第二显示 屏用于显示第二主界面信息,用户可以对任意一个显示屏显示的主界面程序界面进行操 作;当用户在任意一个显示屏显示的主界面程序界面上触发第一操作后,移动终端接收该 第一操作指令,首先将第一操作指令转换成自身能识别的数据并响应该第一操作指令,并 确定该第一操作指令对应第一显示屏还是第二显示屏。
[0097] Sl〇5、将响应所述第一操作指令后得到的响应结果,发送至确定的所述显示屏信 息对应的显示屏处进行显示。
[0098]当确定第一操作指令对应第一显示屏,将响应结果发送至第一显示屏进行显示; 当确定第一操作指令对应第二显示屏,将响应结果发送至第二显示屏进行显示。
[0099]本发明实施例提供的一种屏幕显示信息的处理方法,与现有技术中的外接设备只 能同步移动终端当前屏幕信息,而无法独立运行移动终端的屏幕信息相比,其在外接设备 接入移动终端时,使外接设备能够显示独立于移动终端的第一主界面信息的第二主界面信 息,且能够对用户任一主界面程序界面上的操作进行响应处理并向响应对象反馈响应结 果,使得用户可以同时在移动终端和外接设备上进行不同的操作,满足了用户同时通过外 接设备和移动终端运行不同应用程序的需求。
[0100]进一步的,本发明实施例提供的屏幕显示信息的处理方法中,上述响应结果可能 有三种情况,第一,响应结果只为视频数据;第二,响应结果为音频数据;第三,响应结果同 时包括视频数据和音频数据。
[0101] 对应于上述响应结果包括的三种情况,上述步骤105中,将响应所述第一操作指令 后得到的响应结果,发送至确定的所述显示屏信息对应的显示屏处进行显示,包括:
[0102] 第一,当确定第一操作指令对应第二显示屏时,对所述视频数据进行压缩编码处 理,将编码后的所述视频数据传输到所述外接设备,以便所述外接设备对编码后的所述视 频数据进行解码处理并显示解码后的视频数据;
[0103] 第二,当确定第一操作指令对应第二显示屏时,调用指定传输通道将所述音频数 据传输到所述外接设备,以便所述外接设备控制所述第二显示屏显示所述音频数据。
[0104] 第三,当确定第一操作指令对应第二显示屏时,对所述视频数据进行压缩编码处 理,将编码后的所述视频数据传输到所述外接设备,以便所述外接设备对编码后的所述视 频数据进行解码处理并显示解码后的视频数据;以及,调用指定传输通道将所述音频数据 传输到所述外接设备,以便所述外接设备控制所述第二显示屏显示所述音频数据。
[0105] 而当确定第一操作指令对应的显示屏信息为第一显示屏时,移动终端直接控制显 示屏显示视频数据和/或音频数据,这是移动终端本身的功能,本发明实施例对此不做具体 说明。
[0106] 进一步的,所述应用程序图标在第一主界面程序界面或者第二主界面程序界面上 显示,无论是在第一显示屏的主界面,还是在第二显示屏的主界面,触发不同功能的第一操 作指令对应的响应结果的显示位置不同。具体如下,第一,第一操作指令包括用户在任一主 界面程序界面上显不的应用程序的图标触发的操作指令,该第一操作指令对应的响应结果 为应用程序的图标对应的应用程序界面;第二,第一操作指令还包括旋屏指令,该旋屏指令 为外接设备根据重力传感器传输的重力信号生成的;该旋屏指令的所述响应结果显示在确 定的显示屏信息对应的显示屏的主界面程序界面中。
[0107]参考图2,下面的步骤201至步骤203对主界面上接收“第一”种情况中的第一操作 指令进行说明,所述方法还包括:
[0108] S201、将所述应用程序的图标对应的应用程序界面发送至确定的所述显示屏信息 对应的显示屏处进行显示。
[0109] 具体的,主界面程序为一种系统APP,是一种特殊的APP,该主界面程序界面上可以 显示应用程序的图标。第一操作指令包括用户在任一主界面程序界面上显示的应用程序的 图标触发的操作指令。
[0110] 当确定该第一操作指令对应第一显示屏,首先将第一主界面信息发送至第一显示 屏进行显示,然后移动终端响应该第一操作指令,并在第一显示屏中显示响应后的应用程 序界面。
[0111] 针对第一操作指令对应第一显示屏的技术特征是移动终端本身的功能,本发明实 施例对此不再进行赘述。
[0112] 当确定第一操作指令对应第二显示屏,移动终端响应针对作用于第二显示屏显示 的第二主界面信息的第一操作指令,然后将响应结果(第一操作指令作用的应用程序的图 标对应的应用程序界面)发送至第二显示屏处进行显示。
[0113] 针对第一操作指令对应第二显示屏的情况,应用程序界面的发送过程同上述第二 主界面信息的发送过程相类似,即通过外接虚拟显示屏获取上述应用程序界面,然后启动 Launcher,该Launcher使上述应用程序界面的相关数据运行在外接应用程序任务栈 ExternalFullscreenWorkspaceStacki),然后由通过新增的应用服务 (ExternalCommunicator)调用Android中的编码器对应用程序界面进行编码处理,然后将 编码后的数据通过设定的传输通道发送给外接设备,以便外接设备接收该编码后的数据并 进行解码,并显示解码后的应用程序界面。
[0114] S202、当接收到在所述应用程序界面上触发的第二操作指令后,响应所述第二操 作指令,并确定所述第二操作指令对应的显示屏信息;其中,所述第二操作指令对应的显示 屏信息是指用户触发该操作指令所使用的显示屏的信息;所述显示屏为第一显示屏或者第 二显示屏。
[0115] 具体的,用户还可以针对上述应用程序界面进行操作,具体的,移动终端的第一显 示屏和外接设备的第二显示屏均能够显示应用程序界面,用户可以对任意一个显示屏显示 的应用程序界面,进行操作;当用户在任意一个显示屏显示的应用程序界面触发第二操作 后,移动终端接收第二操作对应的第二操作指令,将第二操作指令转换成自身能识别的数 据并响应该第二操作指令,并确定该第二操作指令对应第一显示屏还是第二显示屏。
[0116] S203、将响应所述第二操作指令后得到的响应结果,发送至确定的所述显示屏信 息对应的显示屏处进行显示;所述响应结果显示在所述应用程序界面中。
[0117]当确定第二操作指令对应第一显示屏,将响应结果发送至第一显示屏进行显示; 当确定第二操作指令对应第二显示屏,将响应结果发送至第二显示屏进行显示。
[0118] 同理,此时,上述响应结果仍然可能有三种情况,第一,响应结果只为视频数据;第 二,响应结果为音频数据;第三,响应结果同时包括视频数据和音频数据。针对该响应结果 的发送过程与主界面信息上响应结果的发送过程相同,本发明实施例对此不再赘述。
[0119] 下面的步骤301至步骤302对主界面上接收“第二”种情况的第一操作指令进行说 明,所述第一操作指令还包括旋屏指令,该旋屏指令为外接设备根据重力传感器传输的重 力信号生成的;其对应的响应结果显示在确定的显示屏信息对应的显示屏的主界面程序界 面中;
[0120] 当用户在所述第二显示屏的第二主界面程序界面上触发的旋屏指令后,外接设备 将该旋屏指令发送给移动终端,移动终端通过应用服务(ExternalCommunicator)接收外接 设备发送的旋屏指令并发送给处理器(移动终端中预先设置有处理器),通过处理器响应该 旋屏指令,得到的响应结果为视频数据;通过外接虚拟显示屏Displayi获取响应结果的视 频数据,并通过应用服务(BxternalCommunicator)将响应结果的视频数据发送至所述外接 设备。
[0121] 当接收到在所述第一显示屏的主界面上触发的旋屏指令后,由移动终端自身的功 能进行处理,本发明实施例对此不做赘述。
[0122] 另外,无论是在第一显示屏和第二显示屏上均可以显示应用程序界面,针对该应 用程序界面的第二操作指令同样可以包括两种情况:第二操作指令为用户针对应用程序界 面触发的操作指令,或者,第二操作指令为旋转指令,而上述两种情况第二操作指令对应的 响应结果的方式与上述两种情况的第一操作指令对应的响应结果的方式相类似,本发明实 施例中不在具体说明。
[0123] 进一步的,上述第二操作指令包括:在所述应用程序界面上触发的所述音频文件 播放请求;所述方法包括:
[0124] 当接收到在应用程序界面上触发的音频文件播放请求后,响应该音频文件播放请 求,并确定该音频文件播放请求对应的显示屏信息;其中,该音频文件播放请求对应的显示 屏信息是指用户触发该音频文件播放请求所使用的显示屏的信息;所述显示屏为第一显示 屏或者第二显示屏;
[0125] 具体的,确定该音频文件播放请求所对应的显示屏的信息包括:获取所述外接设 备的第二显示屏显示的所述应用程序图标的第一标识信息和所述外接设备的第二标识信 息,建立所述第一标识信息和所述第二标识信息的对应关系,并存储所述对应关系;然后, 获取所述音频文件所属的应用程序的第一待识别标识信息;判断所述第一待识别标识信息 是否与所述第一标识信息相同;若所述第一待识别标识信息与所述第一标识信息相同时, 根据所述第一标识信息与所述第二标识信息的对应关系,确定所述音频文件所对应的显示 屏为第二显示屏。
[0126] 将响应于所述音频文件播放请求后得到的音频文件发送至所述显示屏的信息所 对应的显示屏处进行播放。
[0127] 进一步的,参考图3,当在外接设备的第二显示屏显示的应用程序界面上触发所述 音频文件播放请求时,所述当接收到在应用程序界面上触发的音频文件播放请求后,响应 该音频文件播放请求,包括: ^
[0128] S301、当接收到在外接设备的第二显示屏显示的应用程序界面上触发的音频文件 播放请求后,获取所述音频文件播放请求的触控位置信息;
[0129] S302、对所述触控位置信息进行坐标转换,根据坐标转换结果识别所述触控位置 信息对应的应用程序; ^
[0130] S303、获取识别的所述应用程序,从识别的所述应用程序中获取所述音频文件。
[0131] 其中,为便于区分,移动终端第一显示屏对应的虚拟显示屏为Display。,当有多个 外接设备时,则依次设置该多个外接设备的显示屏对应的虚拟显示屏为DisPlayi、 Displays……Displayn,并且,上述每一个虚拟显示屏均对应有两个任务栈(即主界面任务 栈和应用程序任务栈);需要说明的是,上述第二标识信息、虚拟显示屏的标识和上述第二 标识信息均呈一一对应的关系。
[0132] 如图4b所示,相对应的,设置使上述的每个虚拟显示屏均对应一个虚拟扬声器33, 创建虚拟扬声器33以使区分待播放的各个音频。
[0133] 当移动终端获取到任一应用程序的音频文件以后,根据该音频文件所属的应用程 序的第一标识信息以及上述第二标识信息、虚拟显示屏的标识和上述第二标识信息的对应 关系,判断该应用程序对应的虚拟显示屏及任务栈,以便将该音频文件传输至确定的虚拟 显示屏,同时,该虚拟显示屏将该音频文件传输至其对应的虚拟扬声器33,以便该虚拟扬声 器33将该音频文件传输至其对应的外接设备的扬声器或者移动终端上的扬声器。
[0134] 参照图4a、图4b所示,上述安装有上述操作系统(简称AnOS操作系统)的移动终端 在进行多路音频文件的处理过程中,当接收到在应用程序界面上触发的音频文件播放请求 (即第二操作指令触发的音频文件播放请求)后,判断所述音频文件播放请求是在第一显示 屏上触发的还是在第二显示屏上触发的,当音频文件播放请求是在第一显示屏显示的应用 程序界面中触发的,移动终端获取该音频文件,然后将该音频文件经过AudioTrack模块30、 AudioPolicy模块31和AudioFlinger模块32进行处理,最终通过AudioFlinger模块32将该 音频文件传输至移动终端的扬声器,以便移动终端的扬声器进行播放。当音频文件播放请 求是在第二显示屏显示的应用程序界面中触发的,移动终端通过步骤301-步骤302的方式 获取所述音频文件,然后将该音频文件经过AudioTrack模块3〇和AudioFlinger模块32进行 处理,最终通过该AudioFlinger模块32将音频文件传输至对应的虚拟扬声器33,然后由虚 拟扬声器33将该音频文件传输至对应的外接设备。
[0135] 具体的,当音频文件播放请求是作用于外接设备中时,由于移动终端内的 AudioPolicy模块31是闭源(即外界无法对其进行更改),若音频文件通过该AudioPolicy, 移动终端将无法在获知音频文件的传输路径,因此,本发明实施例中,使该音频文件绕开 AudioPol icy模块,直接由AudioTrack模块30进入AudioFl inger模块,最终由虚拟显示屏传 输给匹配的外界设备。
[0136] 作为另一种可选的实施方式,当移动终端获取到AudioPolicy模块31的源代码或 者修改权限时,可以直接对AudioPolicy模块3 1进行修改(例如,当开发者获取到 AudioPolicy模块31的源代码时,直接在移动终端上对该源代码进行修改),使AudioPolicy 模块31能够识别经过的音频文件所属的任务栈。此时,本发明实施例中,移动终端可以使该 音频文件经过AudioPolicy模块进入AudioFlinger模块32,由于AudioPolicy模块31能够识 别经过的音频文件所属的任务栈,从而使得AudioFlinger模块32也能够获知音频文件所属 的任务栈,最终,AudioFl inger模块32能够将该音频文件传输给匹配的虚拟扬声器33,最终 由虚拟显示屏传输给匹配的外界设备。
[0137]进一步的,参考图5,本发明实施例提供的屏幕显示信息的处理方法,步骤102中, 对所述第二主界面程序界面和所述应用程序图标进行处理,包括:
[0138] S401、获取所述外接设备的外接屏参数;所述外接屏参数至少包括:屏幕分辨率和 每英寸点数DPI;所述外接屏参数至少包括:屏幕分辨率和每英寸点数DPI。其中,上述DPI为 单位英寸的像素点的数量。
[0139] S402、根据所述屏幕分辨率和所述DPI,对所述第二主界面程序界面和所述应用程 序图标进行处理,以使得处理后的第二主界面信息能够显示在所述外接设备的第二显示屏 中。
[0140] S403、将处理后的第二主界面信息发送至所述外接设备的所述第二显示屏中进行 显不。
[0141] 具体的,移动终端对将处理后的第二主界面信息进行压缩编码处理;将编码后的 第二主界面信息发送至所述外接设备,以便所述外接设备对编码后的第二主界面信息进行 解码处理并显示解码后的第二主界面信息。
[0142] 对应于上述步骤401至403,移动终端通过系统服务(ExternalDisplayService)根 据屏幕分辨率和DPI创建外接虚拟显示屏Displayi,并基于该外接虚拟显不屏创建外接任 务枝(包括外接主界面任务栈ExternalHomeStacki和外接应用程序任务枝 ExternalFullscreenWorkspaceStacki)。上述外接虚拟显示屏Displayi相当于一个画板,用 于获取外接设备侧的屏幕显示数据;对应于该外接虚拟显示屏Display的外接主界面任务 栈ExternalHomeStacki,用于为外接设备显示的第二主界面信息提供运行环境;对应于该 外接虚拟显示屏Displayi的外接应用程序任务枝ExternalFullscreenWorkspaceStacki,用 于为外接设备显示的第二主界面信息包括的应用程序图标提供运行环境;通过上述外接虚 拟显示屏Di splayi获取上述第二主界面信息,启动Launcher,该Launcher使上述第二主界 面信息运行在外接主界面任务栈ExternalHomeStaclu中,然后由通过新增的应用服务 (ExternalCommunicator)调用Android中的编码器对第二主界面信息进行编码处理,然后 将编码后的数据通过设定的传输通道发送给外接设备,以便外接设备接收该编码后的数据 并进行解码,并显示解码后的第二主界面信息。
[0143] 进一步的,参考图6,本发明实施例中,步骤104中确定该第一操作指令对应的显示 屏信息,包括:
[0144] S501、获取所述第一操作指令中携带的第二待识别标识信息。
[0145] 具体的,上述第一操作指令包括:在移动终端的第一显示屏显示的第一主界面程 序界面触发的第一操作指令和在外接设备的第二显示屏显示的第二主界面程序界面上触 发的第一操作指令,这两种环境中的第一操作指令携带的第二待识别标识信息不同。
[0146] S502、判断所述第二待识别标识信息是否与预存的第一主界面程序界面的第一标 准标识信息和预存的第二主界面程序界面的第二标准标识信息相同;所述第一标准标识信 息和所述第二标准标识信息不同。
[0147] 其中,移动终端预先存储有第一标准标识信息和第二标准标识信息。
[0148] S503、若所述第二待识别标识信息与所述第一标准标识信息相同,确定所述第~ 操作指令对应第一显示屏。
[0149] S504、若所述第二待识别标识信息与所述第二标准标识信息相同,确定所述第— 操作指令对应第二显示屏。
[0150] 进一步的,本发明实施例中提供的屏幕显示信息的处理方法中,移动终端上设置 有通信接口,该通信接口用于接入其他设备(此处的其他设备包括上述外接设备还包括充 电器、耳机等)。上述通信接口可以为USB(Universal Serial Bus,通用串行总线)接口,也 可以为WIFI (Wireless-Fidelity,无线保真)接口。参考图7,所述方法还包括:
[0151] S601、监听所述通信接口的状态信息。
[0152] S602、在检测到所述通信接口的状态为插入状态时,判断是否接收到所述外接设 备的第二标识彳目息。
[0153] S603、若是,确定所述通信接口接入所述外接设备。
[0154] 本发明实施例中,检测到外接设备接入的方法包括:实时监听通信接口的状态信 息,在检测到该通信接口的状态为插入状态时,判断是否接收到外接设备的第二标识信息; 若是,确定上述通信接口接入外接设备。
[0155] 以上述通信接口为USB接口为例进行说明,监听USB接口广播的其当前状态信息, 当检测到USB广播的当前状态信息变更时,判断变更的状态是否为插入状态,若确定变更的 状态为插入状态,在判断是否接收到外接设备的第二标识信息;若接收到外接设备的第二 标识信息,则确定通信接口接入外接设备;若确定变更的状态不是插入状态,则继续监听 USB接口广播的其当前状态信息;若未接收到外接设备的第二标识信息,则继续监听USB接 口广播的其当前状态信息。
[0156] 本发明实施例提供的屏幕显示信息的处理方法中,还包括:在检测到所述外接设 备接入时,在所述移动终端的存储内存中搜索在所述外接设备中具有显示权限的应用程 序;对搜索的具有显示权限的所述应用程序进行处理,得到外接主界面信息;所述外接主界 面信息包括:第二主界面程序界面和其他应用程序图标;将所述外接主界面信息发送至所 述外接设备,以便在所述外接设备的第二显示屏上同步显示所述外接主界面信息。当接收 到在任一主界面程序界面上触发的第一操作指令后,响应该第一操作指令,并确定该第一 操作指令对应的显示屏信息;其中,该操作指令对应的显示屏信息是指用户触发该操作指 令所使用的显示屏的信息;所述显示屏为第一显示屏或者第二显示屏;将响应所述第一操 作指令后得到的响应结果,发送至确定的所述显示屏信息对应的显示屏处进行显示。
[0157]具体的,移动终端中具有存储内存和运行内存;存储内存是指移动终端自带的内 存储存空间,运行内存是指移动终端运行程序时的内存。
[0158]当用户不想让移动终端中的某些应用程序在外接设备上显示时,其首先可以在移 动终端的第一主界面程序界面中进行设置(具体用户可以在主界面中的“设置”选择这些应 用程序的权限中),对应的,移动终端接收用户在第一显示屏上触发的第一权限设置指令, 该第一权限设置指令用于设置上述移动终端中的应用程序在外接设备中的显示权限,且该 第一权限设置指令携带有应用程序的唯一标识(具体的,该唯一标识为应用程序的唯一名 称)。移动终端根据上述第一权限设置指令在存储内存中创建第一权限库,并在该存储内存 中搜索第一权限设置指令携带的唯一标识匹配的应用程序,并将搜索得到的应用程序进行 标识处理,使搜索得到的上述应用程序具有第一权限标识;该第一权限标识用于指示应用 程序在外接设备中没有显示权限;然后,移动终端将具有第一权限标识的应用程序加入上 述第一权限库中。
[0159]移动终端在检测到外接设备接入时,在其包括的存储内存中搜索不在上述第一权 限库中的应用程序,而搜索得到的不在上述第一权限库中的应用程序为在外接设备中具有 显示权限的应用程序。
[0160]上述,在所述移动终端的存储内存中搜索在所述外接设备中具有显示权限的应用 程序,包括:遍历所述移动终端的存储内存中的应用程序,并判断遍历的所述应用程序是否 具有所述第一权限标识;获取判断结果中不含所述第一权限标识的应用程序。
[0161]具体的,在遍历移动终端的存储内存中的应用程序的同时,判断遍历的每一个应 用程序是否在存储内存的第一权限库中且具有第一权限标识,确定不在存储内存的权限库 中且不具有第一权限标识的应用程序,在外接设备中具有显示权限;而确定的在存储内存 的权限库中和/或具有第一权限标识的应用程序,在外接设备中不具有显示权限。
[0162]另外,本发明实施例提供的屏幕显示信息的处理方法中,还包括:在检测到所述外 接设备接入时,获取所述移动终端中的第二主界面程序和所述应用程序;对所述第二主界 面程序和所述应用程序进行处理,得到第二主界面信息;所述第二主界面信息包括:第二主 界面程序界面和显示在该第二主界面程序界面上的其他应用程序图标。将所述第二主界面 信息发送至所述外接设备,以便在所述外接设备的第二显示屏上显示所述第二主界面信 息;当接收到在所述第二主界面程序界面显示的其他应用程序图标上触发的用于启动该其 他应用程序图标的第三操作指令后,根据所述第三操作指令携带的应用程序的唯一标识, 判断该应用程序是否具有运行权限;若是,响应第三操作指令,将响应所述第三操作指令后 得到的响应结果,发送至所述外接设备的第二显示屏处进行显示;若否,显示用于指示该应 用程序无法启动的提示信息。
[0163]具体的,移动终端的第一显示屏用于显示第一主界面信息,外接设备的第二显示 屏用于显示第二主界面信息,用户可以对任意一个显示屏显示的主界面程序界面进行操 作。当用户在任意一个显示屏显示的主界面程序界面上触发操作后,移动终端首先接收该 操作对应的第三操作指令,然后将第按操作指令转换成自身能识别的数据,并判断上述第 三操作指令是作用于第一显示屏上还是作用于第二显示屏,当判断第三操作指令作用在第 二显示屏上时,移动终端根据该第三操作指令携带的应用程序的唯一标识,判断该应用程 序是否具有运行权限;具体的判断过程为在存储内存中的第二权限库搜索是否存在与该唯 一标识匹配的应用程序,若存在,则确定该应用程序具有运行权限;若不存在,则确定该应 用程序不具有运行权限。
[0164] 当用户不想让移动终端中的某些应用程序在外接设备上启动时,其首先可以在移 动终端的主界面程序界面上中(具体可以在主界面中的“设置”)进行设置,使存储内存中的 某些应用程序不再移动终端的主界面中启动运行,对应的,本发明实施例提供的多显示屏 显示信息的处理方法,还包括:
[0165] 接收在所述移动终端的第一显示屏上触发的第二权限设置指令,所述第二权限设 置指令用于设置所述移动终端的应用程序在所述外接设备中的运行权限,且所述第二权限 设置指令携带有所述应用程序的唯一标识; LUI00J在所还移动终3而的存储内存中搜索所述唯一标识匹配的应用程序,对搜索得到的 所述应用程序,行标识处理,使搜索得到的所述应用程序具有第二权限标识;所述第二权 限标识用于指示所述应用程序在外接设备中没有运行权限。
[0167]具体的,移动终端中具有存储内存和运行内存;存储内存是指移动终端自带的内 存储存空间,运行内存是指移动终端运行程序时的内存。
[0168]当用户不想让移动终端中的某些应用程序在外接设备上启动时,其首先可以在移 动终端的主界面程序界面中进行设置(具体可以在主界面中的“设置,,选择应用程序的权 限),对应的,移动终端接收用户在第一显示屏上触发的第二权限设置指令,该第二权限设 置指令用于设置上述移动终端中的应用程序在外接设备中的启动运行权限,且该第二设置 指令携带有应用程序的唯一标识(具体的,该唯一标识为应用程序的唯一名称)。移动终端 根据上述第二权限设置指令在存储内存中创建第二权限库,并在该存储内存中搜索第二权 限设置指令携带的唯一标识匹配的应用程序,并将搜索得到的应用程序进行标识处理,使 搜索得到的应用程序均具有第二权限标识;该第二权限标识用于指示应用程序在外接设备 中没有启动运行权限;然后,移动终端将具有第二权限标识的应用程序加入第二权限库中。 [0169]本发明实施例提供的一种屏幕显示信息的处理方法,与现有技术中的外接设备只 能同步移动终端当前屏幕信息,而无法独立运行移动终端的屏幕信息相比,其在外接设备 接入移动终端时,使外接设备能够显示独立于移动终端的第一主界面信息的第二主界面信 息,且能够对用户任一主界面程序界面上的操作进行响应处理并向响应对象反馈响应结 果,使得用户可以同时在移动终端和外接设备上进行不同的操作,满足了用户同时通过外 接设备和移动终端运行不同应用程序的需求。
[0170]本发明实施例中提供的一种屏幕显示信息的显示方法,所述方法应用于与移动终 端通信连接的外接设备,所述移动终端具有第一显示屏,所述第一显示屏用于显示所述移 动终端的第一主界面信息;所述第一主界面信息包括:第一主界面程序界面和应用程序图 标;所述外接设备具有第二显示屏,所述第一显示屏的屏幕尺寸大于所述第二显示屏的屏 幕尺寸;参考图8,所述方法包括:
[0171] S701、在接入所述移动终端后,接收所述移动终端发送的第二主界面信息,在所述 第二显示屏上显示所述第二主界面信息;所述第二主界面信息包括:第二主界面程序界面 和显示在第二主界面程序界面上的应用程序图标。
[0172] 本发明实施例中,外接设备中预先存储有与移动终端侧的编码协议对应的解码协 议,在接入移动终端后,接收移动终端中发送的编码后的第二主界面信息;根据预存的解码 协议对编码后的第二主界面信息进行解码处理,显示解码后的第二主界面信息。
[0173] S702、在监听到所述第二显示屏显示的第二主界面程序界面上的控制操作时,生 成与所述控制操作对应的第一控制指令。 _
[0174] 具体的,用户的控制操作可以是对第二主界面程序界面显示的应用程序的图标的 触控操作,也可以是对第二主界面程序界面的旋屏操作。对应的,上述第一控制指令可以是 用户针对第二主界面程序界面显示显示的应用程序的图标触发的第一操作指令,也可以是 旋屏指令。
[0175] S703、将所述第一控制指令发送至所述移动终端,以使所述移动终端响应于所述 第一控制指令。
[0176] 具体的,外接设备将控制指令发送至所述移动终端的应用服务 (ExternalCommunicator),而移动终端侧的响应过程与在前述屏幕显不伯息的处理方法中 已详细说明,本发明实施例不做具体限定。 _
[0177] S704、接收所述移动终端发送的响应于所述第一控制指令的响应结果,显示所述 响应结果。具体的,接收移动终端通过应用服务(BxternalCommunicator)发送的第一控制 指令的响应结果。
[0178] 当该第一控制指令为用户针对第二主界面程序界面显示显示的应用程序的图标 触发的第一操作指令时,接收移动终端通过应用服务®xternalCommunicator)发送的应用 程序的图标对应的应用程序界面,对该应用程序界面进行处理并显示;当第一控制指令为 旋屏指令时,接收所述移动终端通过应用服务®xternalCommunicator)发送的旋转后的第 二主界面程序界面,并进行处理和显示。
[0179] 进一步的,参考图9,本发明实施例提供的屏幕显示信息的显示方法还包括:
[0180] S801、在监听到所述第二显示屏显示的应用程序界面上的控制操作时,生成与所 述控制操作对应的第二控制指令;
[0181] S802、将所述第二控制指令发送至所述移动终端,以使所述移动终端响应于所述 第二控制指令;
[0182] S803、接收所述移动终端发送的响应于所述第二控制指令的响应结果,显示所述 响应结果;该响应结果包括:视频数据和/或音频数据。
[0183]具体的,接收所述移动终端发送的编码后的所述视频数据,对编码后的所述视频 数据进行解码处理,显示解码后的视频数据;和/或,接收所述移动终端发送的编码后的所 述音频数据,对编码后的所述音频数据进行解码处理,显示解码后的音频数据。
[0184]具体的,外接设备根据预存的解码协议对编码后的视频数据和/或音频数据进行 解码处理,显示解码后的视频数据和/或音频数据。
[0185]本发明实施例还提供了一种屏幕显示信息的显示系统,参考图10,包括:应用上述 屏幕显示信息的处理方法处理屏幕显示信息的移动终端10和应用上述屏幕显示信息的显 示方法显示屏幕显示信息的外接设备20;移动终端10和外接设备20通信连接。上述通信连 接可以为有线连接(如通过USB连接),也可以为无线连接(如通过WIFI连接)。
[0186] 其中,上述外接设备20中设置有可充电电池(如锂电池),在外接设备20在接入移 动终端10时,该外接设备可以为移动终端10充电,这样相当于增加了移动终端中的电池的 电量,能够移动终端10运行的持久性,用户体验较好。
[0187]本发明实施例提供的一种屏幕显示信息的显示方法及系统,与现有技术中的外接 设备2〇只能同步移动终端10的屏幕信息而无法独立于移动终端10的屏幕信息相比,其在接 入移动终端10后,接收移动终端10显示的独立于移动终端10显示的第一主界面信息的第二 主界面信息,同时根据用户输入的控制操作,响应给用户控制操作的反馈结果,使得用户可 以同时在移动终端10和外接设备20上进行不同的操作,满足了用户同时通过外接设备20和 移动终端10运行不同应用程序的需求。
[0188]本发明实施例所提供的屏幕显示信息的显示系统可以为设备上的特定硬件或者 安装于设备上的软件或固件等。本发明实施例所提供的装置,其实现原理及产生的技术效 果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施 例中相应内容。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,前述描述的 系统、装置和单元的具体工作过程,均可以参考上述方法实施例中的对应过程,在此不再赘 述。
[0189] 在本发明所提供的实施例中,应该理解到,所揭露装置和方法,可以通过其它的方 式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻 辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可 以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间 的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连 接,可以是电性,机械或其它的形式。
[0190] 所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显 示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个 网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目 的。
[0191] 另外,在本发明提供的实施例中的各功能单元可以集成在一个处理单元中,也可 以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
[0192] 所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以 存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说 对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计 算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个 人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。 而前述的存储介质包括:U盘、移动硬盘、只读存储器(R0M,Read-0nly Memory)、随机存取存 储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
[0193] 应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一 个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释,此外,术语“第 一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
[0194] 最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明 的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发 明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员 在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻 易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使 相应技术方案的本质脱离本发明实施例技术方案的精神和范围。都应涵盖在本发明的保护 范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
Claims (16)
1.一种屏幕显示信息的处理方法,其特征在于,所述方法应用于与外接设备通信连接 的移动终端,所述移动终端具有第一显示屏,所述第一显示屏用于显示所述移动终端的第 一主界面信息;所述第一主界面信息包括:第一主界面程序界面和应用程序图标;所述外接 设备具有第二显示屏,所述第一显示屏的屏幕尺寸大于所述第二显示屏的屏幕尺寸;所述 方法包括: 在检测到所述外接设备接入时,获取所述移动终端中的第二主界面程序和所述应用程 序; 对所述第二主界面程序和所述应用程序进行处理,得到第二主界面信息;所述第二主 界面信息包括:第二主界面程序界面和所述应用程序图标; 将所述第二主界面信息发送至所述外接设备,以便在所述外接设备的第二显示屏上显 示所述第二主界面信息; 当接收到在任一个主界面程序界面上触发的第一操作指令后,响应该第一操作指令, 并确定该第一操作指令对应的显示屏信息;其中,该操作指令对应的显示屏信息是指用户 触发该操作指令所使用的显示屏的信息;所述显示屏为第一显示屏或者第二显示屏; 将响应所述第一操作指令后得到的响应结果,发送至确定的所述显示屏信息对应的显 示屏处进行显示。
2. 根据权利要求1所述的屏幕显示信息的处理方法,其特征在于,所述应用程序图标在 第一主界面程序界面或者第二主界面程序界面上显示,所述第一操作指令包括用户在任一 主界面程序界面上显示的应用程序的图标触发的操作指令,所述第一操作指令对应的响应 结果为所述应用程序的图标对应的应用程序界面,所述方法还包括: 将所述应用程序的图标对应的应用程序界面发送至确定的所述显示屏信息对应的显 示屏处进行显示; 当接收到在所述应用程序界面上触发的第二操作指令后,响应所述第二操作指令,并 确定所述第二操作指令对应的显示屏信息;其中,所述第二操作指令对应的显示屏信息是 指用户触发该操作指令所使用的显示屏的信息;所述显示屏为第一显示屏或者第二显示 屏; 将响应所述第二操作指令后得到的响应结果,发送至确定的所述显示屏信息对应的显 示屏处进行显示;所述响应结果显示在所述应用程序界面中。
3. 根据权利要求2所述的屏幕显示信息的处理方法,其特征在于,所述第二操作指令包 括:在所述应用程序界面上触发的音频文件播放请求;所述方法包括: 当接收到在应用程序界面上触发的音频文件播放请求后,响应该音频文件播放请求, 并确定该音频文件播放请求对应的显示屏信息;其中,该音频文件播放请求对应的显示屏 信息是指用户触发该音频文件播放请求所使用的显示屏的信息;所述显示屏为第一显示屏 或者第二显示屏; 将响应于所述音频文件播放请求后得到的音频文件发送至所述显示屏的信息所对应 的显示屏处进行播放。
4. 根据权利要求3所述的屏幕显示信息的处理方法,其特征在于,所述方法还包括:获 取所述外接设备的第二显示屏显示的所述应用程序图标的第一标识信息和所述外接设备 的第二标识信息,建立所述第一标识信息和所述第二标识信息的对应关系,并存储所述对 应关系; 所述确定该音频文件播放请求所对应的显示屏的信息,包括: 获取所述音频文件所属的应用程序的第一待识别标识信息; 判断所述第一待识别标识信息是否与所述第一标识信息相同; 若所述第一待识别标识信息与所述第一标识信息相同时,根据所述第一标识信息与所 述第二标识信息的对应关系,确定所述音频文件所对应的显示屏为第二显示屏。
5. 根据权利要求3所述的方法,其特征在于,当在外接设备的第二显示屏显示的应用程 序界面上触发所述音频文件播放请求时,所述当接收到在应用程序界面上触发的音频文件 播放请求后,响应该音频文件播放请求,包括: 当接收到在外接设备的第二显示屏显示的应用程序界面上触发的音频文件播放请求 后,获取所述音频文件播放请求的触控位置信息; 对所述触控位置信息进行坐标转换,根据坐标转换结果识别所述触控位置信息对应的 应用程序; 获取识别的所述应用程序,从识别的所述应用程序中获取所述音频文件。
6. 根据权利要求1所述的屏幕显示信息的处理方法,其特征在于,所述对所述第二主界 面程序界面和所述应用程序图标进行处理,包括: 获取所述外接设备的外接屏参数;所述外接屏参数至少包括:屏幕分辨率和每英寸点 数 DPI; 根据所述屏幕分辨率和所述DPI,对所述第二主界面程序界面和所述应用程序图标进 行处理,以使得处理后的第二主界面信息能够显示在所述外接设备的第二显示屏中; 将处理后的第二主界面信息发送至所述外接设备的所述第二显示屏中进行显示。
7. 根据权利要求1所述的屏幕显示信息的处理方法,其特征在于,所述将所述第二主界 面信息发送至所述外接设备,以便在所述外接设备的第二显示屏上显示所述第二主界面信 息,包括: 对所述第二主界面信息进行压缩编码处理; 将编码后的所述第二主界面信息发送至所述外接设备,以便所述外接设备对编码后的 所述第二主界面信息进行解码处理并显示解码后的第二主界面信息。
8. 根据权利要求1所述的屏幕显示信息的处理方法,其特征在于,所述确定该第一操作 指令对应的显示屏信息,包括: 获取所述第一操作指令中携带的第二待识别标识信息; 判断所述第二待识别标识信息是否与预存的第一主界面程序界面的第一标准标识信 息和预存的第二主界面程序界面的第二标准标识信息相同;所述第一标准标识信息和所述 第二标准标识信息不同; 若所述第二待识别标识信息与所述第一标准标识信息相同,确定所述第一操作指令对 应第一显示屏; 若所述第二待识别标识信息与所述第二标准标识信息相同,确定所述第一操作指令对 应第二显示屏。
9. 根据权利要求1-8任一项所述的屏幕显示信息的处理方法,其特征在于,所述响应结 果包括:视频数据和/或音频数据;将响应所述第一操作指令后得到的响应结果,发送至确 定的所述显示屏信息对应的显不屏处进行显示,包括: 当确定第一操作指令对应的显示屏信息为第二显示屏时,对所述视频数据进行压缩编 码处理,将编码后的所述视频数据传输到所述外接设备,以便所述外接设备对编码后的所 述视频数据进行解码处理并显示解码后的视频数据; 和/或,当确定第一操作指令对应的显示屏信息为第二显示屏时,调用指定传输通道将 所述音频数据传输到所述外接设备,以便所述外接设备控制所述第二显示屏显示所述音频 数据。
10. 根据权利要求1 -8任一项所述的屏幕显示信息的处理方法,其特征在于,所述第一 操作指令还包括旋屏指令,该旋屏指令为所述外接设备根据重力传感器传输的重力信号生 成的;所述第一操作指令对应的所述响应结果显示在确定的所述显示屏信息对应的显示屏 的主界面程序界面中。
11. 根据权利要求1所述的屏幕显示信息的处理方法,其特征在于,所述移动终端上设 置有通信接口;所述方法还包括: 监听所述通信接口的状态信息; 在检测到所述通信接口的状态为插入状态时,判断是否接收到所述外接设备的第二标 识{目息; 若是,确定所述通信接口接入所述外接设备。
12. —种屏幕显示信息的显示方法,其特征在于,所述方法应用于与移动终端通信连接 的外接设备,所述移动终端具有第一显示屏,所述第一显示屏用于显示所述移动终端的第 一主界面信息;所述第一主界面信息包括:第一主界面程序界面和应用程序图标;所述外接 设备具有第二显示屏,所述第一显示屏的屏幕尺寸大于所述第二显示屏的屏幕尺寸;所述 方法包括: 在接入所述移动终端后,接收所述移动终端发送的第二主界面信息,在所述第二显示 屏上显示所述第二主界面信息;所述第二主界面信息包括:第二主界面程序界面和显示在 第二主界面程序界面上的应用程序图标; 在监听到所述第二显示屏显示的第二主界面程序界面上的控制操作时,生成与所述控 制操作对应的第一控制指令; 将所述第一控制指令发送至所述移动终端,以使所述移动终端响应于所述第一控制指 令; 接收所述移动终端发送的响应于所述第一控制指令的响应结果,显示所述响应结果。
13. 根据权利要求12所述的屏幕显示信息的显示方法,其特征在于,接收所述移动终端 发送的第二主界面信息,包括: 接收所述移动终端发送的编码后的所述第二主界面信息; 对编码后的所述第二主界面信息进行解码处理,显示解码后的主界面信息。
14. 根据权利要求12所述的屏幕显示信息的显示方法,其特征在于,所述第一控制指令 为用户针对显示在第二主界面程序界面上的应用程序图标触发的第三操作指令;或者所述 第一控制指令为旋屏指令; 当所述第一控制指令为所述第三操作指令时,所述接收所述移动终端发送的响应于所 述第一控制指令的响应结果,包括: 接收所述移动终端发送的触发操作的应用程序的图标对应的应用程序界面。
15.根据权利要求14所述的屏幕显示信息的显示方法,其特征在于,还包括: 在监听到所述第二显示屏显示的应用程序界面上的控制操作时,生成与所述控制操作 对应的第二控制指令; 将所述第二控制指令发送至所述移动终端,以使所述移动终端响应于所述第二控制指 令; 接收所述移动终端发送的响应于所述第二控制指令的响应结果,显示所述响应结果; 所述响应结果包括:视频数据和/或音频数据。
16.—种屏幕显示信息的显示系统,其特征在于,包括:如应用权利要求1至^任一项所 述的方法处理屏幕显示信息的移动终端和如应用权利要求12至15任一项所述的方法显示 屏幕显示信息的外接设备;所述移动终端和所述外接设备通信连接。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710446409.XA CN107329717B (zh) | 2017-06-14 | 2017-06-14 | 一种屏幕显示信息的处理方法、显示方法和显示系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710446409.XA CN107329717B (zh) | 2017-06-14 | 2017-06-14 | 一种屏幕显示信息的处理方法、显示方法和显示系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107329717A true CN107329717A (zh) | 2017-11-07 |
CN107329717B CN107329717B (zh) | 2021-03-30 |
Family
ID=60194675
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710446409.XA Active CN107329717B (zh) | 2017-06-14 | 2017-06-14 | 一种屏幕显示信息的处理方法、显示方法和显示系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107329717B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108491175A (zh) * | 2018-02-13 | 2018-09-04 | 广州视源电子科技股份有限公司 | 内容自动排布方法、装置、电子装置及可读存储介质 |
CN108989552A (zh) * | 2018-06-28 | 2018-12-11 | 努比亚技术有限公司 | 屏幕点亮方法、双屏移动终端和计算机可读存储介质 |
CN109471604A (zh) * | 2018-10-11 | 2019-03-15 | 上海联影医疗科技有限公司 | 显示页面同步切换方法、装置、存储介质及设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101515226A (zh) * | 2008-02-19 | 2009-08-26 | 联想(北京)有限公司 | 双系统显示方法、具有辅屏的笔记本电脑和辅助显示装置 |
US20130162564A1 (en) * | 2011-12-27 | 2013-06-27 | Kazuhide Adachi | Operation input system |
CN104063058A (zh) * | 2014-07-10 | 2014-09-24 | 深圳市中兴移动通信有限公司 | 分屏的应用方法及移动终端 |
CN105282327A (zh) * | 2015-09-16 | 2016-01-27 | 联想(北京)有限公司 | 一种控制方法、电子设备及外接设备 |
US20160351168A1 (en) * | 2014-02-18 | 2016-12-01 | Zte Corporation | Split-Screen Processing Method and Device, and Computer Storage Medium |
CN106843779A (zh) * | 2016-11-23 | 2017-06-13 | 深圳市金立通信设备有限公司 | 一种屏幕控制方法及终端 |
-
2017
- 2017-06-14 CN CN201710446409.XA patent/CN107329717B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101515226A (zh) * | 2008-02-19 | 2009-08-26 | 联想(北京)有限公司 | 双系统显示方法、具有辅屏的笔记本电脑和辅助显示装置 |
US20130162564A1 (en) * | 2011-12-27 | 2013-06-27 | Kazuhide Adachi | Operation input system |
US20160351168A1 (en) * | 2014-02-18 | 2016-12-01 | Zte Corporation | Split-Screen Processing Method and Device, and Computer Storage Medium |
CN104063058A (zh) * | 2014-07-10 | 2014-09-24 | 深圳市中兴移动通信有限公司 | 分屏的应用方法及移动终端 |
CN105282327A (zh) * | 2015-09-16 | 2016-01-27 | 联想(北京)有限公司 | 一种控制方法、电子设备及外接设备 |
CN106843779A (zh) * | 2016-11-23 | 2017-06-13 | 深圳市金立通信设备有限公司 | 一种屏幕控制方法及终端 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108491175A (zh) * | 2018-02-13 | 2018-09-04 | 广州视源电子科技股份有限公司 | 内容自动排布方法、装置、电子装置及可读存储介质 |
CN108491175B (zh) * | 2018-02-13 | 2021-05-07 | 广州视源电子科技股份有限公司 | 内容自动排布方法、装置、电子装置及可读存储介质 |
CN108989552A (zh) * | 2018-06-28 | 2018-12-11 | 努比亚技术有限公司 | 屏幕点亮方法、双屏移动终端和计算机可读存储介质 |
CN108989552B (zh) * | 2018-06-28 | 2021-07-23 | 努比亚技术有限公司 | 屏幕点亮方法、双屏移动终端和计算机可读存储介质 |
CN109471604A (zh) * | 2018-10-11 | 2019-03-15 | 上海联影医疗科技有限公司 | 显示页面同步切换方法、装置、存储介质及设备 |
CN109471604B (zh) * | 2018-10-11 | 2021-12-21 | 上海联影医疗科技股份有限公司 | 显示页面同步切换方法、装置、存储介质及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN107329717B (zh) | 2021-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1266927C (zh) | 使用便携式设备启动交互的方法以及所使用的便携式设备 | |
CN108762937A (zh) | 配置信息发送方法、获取方法、装置及终端 | |
CN107277242A (zh) | 一种屏幕显示信息的处理方法、显示方法和显示系统 | |
CN107329717A (zh) | 一种屏幕显示信息的处理方法、显示方法和显示系统 | |
CN107005739A (zh) | 用于基于语音的设备的外部视觉交互 | |
CN107277243A (zh) | 多显示屏显示信息的处理方法、显示方法和显示系统 | |
CN106663115A (zh) | 通过不同的输出设备继续播放媒体内容 | |
CN104298427A (zh) | 结果界面显示方法和装置 | |
CN109200567B (zh) | 一种运动数据的交互方法及其装置、电子设备 | |
US20150279371A1 (en) | System and Method for Providing an Audio Interface for a Tablet Computer | |
WO2016155446A1 (zh) | 信息展示方法、信道管理平台及终端 | |
CN102402391A (zh) | 显示由于设置改变而导致的电池寿命 | |
CN108958629B (zh) | 分屏退出方法、装置、存储介质和电子设备 | |
CN107037858A (zh) | 一种移动终端的外接设备及屏幕显示信息的显示系统 | |
CN110809226A (zh) | 一种音频播放方法及电子设备 | |
CN110719529B (zh) | 一种多路视频同步方法、装置、存储介质及终端 | |
CN108880974B (zh) | 会话群组创建方法及装置 | |
CN109830248B (zh) | 一种音频录制方法及终端设备 | |
CN110913066A (zh) | 一种显示方法及电子设备 | |
CN105049982B (zh) | 一种基于智能音箱的音乐播放方法及智能音箱 | |
CN108108338B (zh) | 一种歌词处理方法、歌词显示方法、服务器及移动终端 | |
CN108391152A (zh) | 显示控制方法和显示控制装置 | |
CN110210844B (zh) | 一种资源转移方法、服务器和终端 | |
CN105854295A (zh) | 一种利用便携数码设备实现多人游戏的方法、装置及系统 | |
CN111199424A (zh) | 一种广告投放方法、装置、终端设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |