CN112218144B - 投屏控制方法、装置、电子设备以及计算机可读介质 - Google Patents

投屏控制方法、装置、电子设备以及计算机可读介质 Download PDF

Info

Publication number
CN112218144B
CN112218144B CN202011074118.0A CN202011074118A CN112218144B CN 112218144 B CN112218144 B CN 112218144B CN 202011074118 A CN202011074118 A CN 202011074118A CN 112218144 B CN112218144 B CN 112218144B
Authority
CN
China
Prior art keywords
interface
user terminal
additional control
user
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011074118.0A
Other languages
English (en)
Other versions
CN112218144A (zh
Inventor
袁兆卫
管皓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN202011074118.0A priority Critical patent/CN112218144B/zh
Publication of CN112218144A publication Critical patent/CN112218144A/zh
Application granted granted Critical
Publication of CN112218144B publication Critical patent/CN112218144B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G06F3/04855—Interaction with scrollbars
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Abstract

本申请公开了一种投屏控制方法和装置。该方法的一具体实施方式包括：创建主界面和附加控制界面，主界面显示在目标设备上；基于附加控制界面，得到操作屏幕；将操作屏幕投射到用户终端，以在用户终端生成操作界面；基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。该实施方式提升了用户体验。

Description

投屏控制方法、装置、电子设备以及计算机可读介质
技术领域
本公开涉及计算机技术领域，具体涉及显示控制技术领域，尤其涉及一种投屏控制方法、装置、电子设备以及计算机可读介质。
背景技术
用户在电视机或机顶盒上使用视频播放软件看视频的时候，只能通过遥控器控制视频的播放，相对手机播放显得不太便利，比如不能通过滑动屏幕调节播放进度，不能直接拖动视频进度条到指定进度；此外，遥控器无法进行目前应用非常广泛的操作，比如发送弹幕，分享视频到社交网络，截屏，截视频等。
发明内容
本公开的实施例提出了投屏控制方法、装置、电子设备以及计算机可读介质。
第一方面，本公开的实施例提供了一投屏控制方法，该方法包括：创建主界面和附加控制界面，主界面显示在目标设备上；基于附加控制界面，得到操作屏幕；将操作屏幕投射到用户终端，以在用户终端生成操作界面；基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
在一些实施例中，上述方法还包括：创建虚拟屏幕；基于附加控制界面，得到操作屏幕包括：将附加控制界面的内容添加至虚拟屏幕，得到操作屏幕。
在一些实施例中，上述基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果，包括：接收用户在操作界面中输入的弹幕文本；将弹幕文本上传至弹幕服务器；接收并在主界面上显示弹幕服务器发送的包含弹幕文本的显示内容。
在一些实施例中，上述方法还包括：将显示内容中的弹幕文本添加至附加控制界面，并将弹幕文本同步投屏至用户终端，以在操作界面上显示弹幕文本。
在一些实施例中，上述基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果，包括：接收用户在操作界面输出的分享请求；基于分享请求，获取与主界面的显示内容相对应的待分享信息；将待分享信息发送给用户终端，以使用户终端启动第三方应用，并使第三方应用分享待分享信息。
在一些实施例中，上述基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果，包括：接收用户在操作界面输出的截取请求；基于截取请求，截取与主界面的当前显示内容相对应的截取信息；将截取信息发送给用户终端。
在一些实施例中，上述方法还包括：动态调整附加控制界面的布局；基于动态调整后的附加控制界面，得到新的操作屏幕；将新的操作屏幕投射到用户终端，以在用户终端生成新的操作界面；基于用户在新的操作界面的操作请求，执行与该操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
在一些实施例中，上述方法还包括：获取主界面的显示内容的内容列表；将内容列表添加至附加控制界面，并将内容列表同步投屏至用户终端；接收用户在操作界面上对内容列表的切换请求；获取与切换请求相对应的主界面的显示内容；在主界面上显示与切换请求相对应的显示内容。
第二方面，本公开的实施例提供了一种投屏控制装置，该装置包括：创建单元，被配置成创建主界面和附加控制界面，主界面显示在目标设备上；得到单元，被配置成基于附加控制界面，得到操作屏幕；生成单元，被配置成将操作屏幕投射到用户终端，以在用户终端生成操作界面；控制单元，被配置成基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
在一些实施例中，上述装置还包括：建屏单元，被配置成创建虚拟屏幕；得到单元，进一步被配置成将附加控制界面的内容添加至虚拟屏幕，得到操作屏幕。
在一些实施例中，控制单元包括：文本接收模块，被配置成接收用户在操作界面中输入的弹幕文本；上传模块，被配置成将弹幕文本上传至弹幕服务器；显示模块，被配置成接收并在主界面上显示弹幕服务器发送的包含弹幕文本的显示内容。
在一些实施例中，上述控制单元还包括：添加模块，被配置成将显示内容中的弹幕文本添加至附加控制界面；同步模块，被配置成将弹幕文本同步投屏至用户终端，以在操作界面上显示弹幕文本。
在一些实施例中，上述控制单元包括：分享接收模块，被配置成接收用户在操作界面输出的分享请求；获取模块，被配置成基于分享请求，获取与主界面的显示内容相对应的待分享信息；启动模块，被配置成将待分享信息发送给用户终端，以使用户终端启动第三方应用，并使第三方应用分享待分享信息。
在一些实施例中，上述控制单元包括：截取接收模块，被配置成接收用户在操作界面输出的截取请求；截取模块，被配置成基于截取请求，截取与主界面的当前显示内容相对应的截取信息；发送模块，被配置成将截取信息发送给用户终端。
在一些实施例中，上述装置还包括：调整单元，被配置成动态调整附加控制界面的布局；操作单元，被配置成基于动态调整后的附加控制界面，得到新的操作屏幕；投射单元，被配置成将新的操作屏幕投射到用户终端，以在用户终端生成新的操作界面；操纵单元，被配置成基于用户在新的操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
在一些实施例中，上述装置还包括：列表获取单元，被配置成获取主界面的显示内容的内容列表；添加单元，被配置成将内容列表添加至附加控制界面；投屏单元，被配置成将内容列表同步投屏至用户终端；切换接收单元，被配合成接收用户在操作界面上对内容列表的切换请求；内容获取单元，被配置成获取与切换请求相对应的主界面的显示内容；显示单元，被配置成在主界面上显示与切换请求相对应的显示内容。
第三方面，本公开的实施例提供了一种电子设备，该电子设备包括：一个或多个处理器；存储装置，其上存储有一个或多个程序；当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如第一方面中任一实现方式描述的方法。
第四方面，本公开的实施例提供了一种计算机可读介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面中任一实现方式描述的方法。
本公开的实施例提供的投屏控制方法和装置，首先创建主界面和附加控制界面，主界面显示在目标设备上；其次基于附加控制界面，得到操作屏幕；然后将操作屏幕投射到用户终端，以在用户终端生成操作界面；最后基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。从而在允许创建主界面之外，再创建一个附加控制界面到操作屏幕，并将操作屏幕投射到用户终端，得到操作界面，用户在用户终端直接操作操作界面，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果，从而实现了与用户终端直接播放视频时相同的效果，提高了设备间视频控制的灵活性，还提升了用户体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本公开的其它特征、目的和优点将会变得更明显：
图1是本公开的一个实施例可以应用于其中的示例性系统架构图；
图2是根据本公开的投屏控制方法的一个实施例的流程图；
图3是根据本公开的操作界面的一种结构示意图；
图4是根据本公开的新的操作界面的一种结构示意图；
图5是根据本公开的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法的一个实施例的流程图；
图6是根据本公开的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法的另一个实施例的流程图；
图7是根据本公开的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法的第三个实施例的流程图；
图8是根据本公开的投屏控制装置的一个实施例的结构示意图；
图9是适于用来实现本公开的实施例的电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。
需要说明的是，在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
图1示出了可以应用本公开的投屏控制方法或投屏控制系统的示例性架构100。
如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，通常可以包括无线通信链路等等。
终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102上可以安装有播放视频的应用，比如电视机、机顶盒、电脑等，终端设备103上可以安装有各种通讯客户端应用，例如即时通信工具、邮箱客户端等。
终端设备101、102、103可以是硬件，也可以是软件。当终端设备101、102、103为硬件时，可以是具有通信和控制功能的用户设备。当终端设备101、102、103为软件时，可以安装在上述用户设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的软件或软件模块)，也可以实现成单个软件或软件模块。在此不做具体限定。
服务器105可以是提供各种服务的服务器，例如为获取终端设备101、102、103上显示系统的相关信息的投屏控制服务器。投屏控制服务器可以对网络中各显示系统的相关数据进行分析处理，并将处理结果反馈给终端设备。
需要说明的是，服务器可以是硬件，也可以是软件。当服务器为硬件时，可以实现成多个服务器组成的分布式服务器集群，也可以实现成单个服务器。当服务器为软件时，可以实现成多个软件或软件模块(例如用来提供分布式服务的软件或软件模块)，也可以实现成单个软件或软件模块。在此不做具体限定。
需要说明的是，本公开的实施例所提供的投屏控制方法一般由服务器105执行，相应地，投屏控制装置一般设置于服务器105中。
应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。
继续参考图2，示出了根据本公开的投屏控制方法的一个实施例的流程200。该投屏控制方法包括以下步骤：
步骤201，创建主界面和附加控制界面，主界面显示在目标设备上。
本实施例中，投屏控制方法运行于其上的执行主体可以一种目标应用，而该目标应用可以为实现视频播放、视频控制等功能的视频应用。目标应用可以创建主界面，并在主界面创建完成之后，通过调用目标设备的接口，实现主界面在目标设备上的显示。本实施例中，目标设备可以是显示器、电视机、机顶盒等用户终端。
本实施例中，目标应用不仅可以创建主界面，还可以创建一个主界面之外的附加控制界面，目标应用可以自行决定在附加控制界面上渲染的界面的样式以及界面的功能，还可以将该附加控制界面发送到用户终端或者服务器，以使用户终端或者服务器操作该附加控制界面。
本实施例中，目标应用可以安装在目标设备上，也可以安装在除目标设备之外、能与用户终端建立投屏的设备或者远程桌面上。
步骤202，基于附加控制界面，得到操作屏幕。
本实施例中，操作屏幕是可以在用户终端上独立显示的屏幕，操作屏幕包括附加控制界面，操作界面具有附加控制界面的所有功能，并且操作屏幕在用户终端显示时，不影响用户终端其他应用的运行。
本实施例中，可选地，可以通过远程桌面技术得到操作屏幕，还可以通过创建虚拟屏幕得到操作屏幕。具体地，虚拟屏幕就是用软件虚拟一个桌面，虚拟桌面的好处是可以随意安排桌面和软件及个性化设置却不影响目标设备，其就像另一个系统，但是它的缺点是不能访问除软件安装盘符外的其他盘符，并且有些软件不能兼容。
在本实施例的一些可选实现方式中，在创建虚拟屏幕之后，基于附加控制界面，得到操作屏幕的方法包括：
将附加控制界面的内容添加至虚拟屏幕，得到操作屏幕。
本可选实现方式中，创建虚拟屏幕，将附加控制界面的内容添加至虚拟屏幕，得到操作屏幕，可以方便、快捷地将附加控制界面的内容投射到用户终端，提高了用户体验。
步骤203，将操作屏幕投射到用户终端，以在用户终端生成操作界面。
本实施例中，如图3，示出了操作界面的一个示例图，在用户终端设置有界面分析模块，该界面分析模块可以通过AI(Artificial Intelligence，人工智能)算法分析操作界面的布局，或者根据目标设备发送过来的布局数据解析操作界面，最终形成一个布局和事件的对应表，该对应表如表1所示。表1中的Mobile side response表示对于一个按键或者输入框的点击事件，用户端应该做出的响应，比如用户点击输入文本框1，启动用户终端自带的输入法进行文本输入；或者用户点击发送按钮2的时候，将输入文本框中的文本发送至目标设备；或者用户点击前播按钮3的时候，目标设备的主界面上视频进行前面内容的播放；或者用户点击分享按钮4的时候，用户终端需要启动本地第三方社交软件进行分享。
表1
Number Type Coordinate Size Event Mobile side response
1 input 10 10 1600 80 “input bullet comments” Launch IME
2 button 1610 10 300 80 “send bullet comments” N/A
3 button 10 900 300 80 “play previous media” N/A
4 button 1610 10 300 80 “share content” <![CDATA[Deep link to 3<sup>rd</sup> APP]]>
步骤204，基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
本实施例中，操作请求可以根据操作界面上控件的不同，具有不同的信息内容，比如，操作界面上具有分享按钮，则操作请求可以是分享按钮的触发信息；操作界面上具有进度条，则操作请求可以是进度程度的信息。
本实施例中，主界面显示在目标设备上，附加控制界面通过投屏的方式显示在用户终端。用户通过由附加控制界面转换得到的操作界面，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果，从而达到自主控制目标应用的目的。
本实施例提供的投屏控制方法，首先创建主界面和附加控制界面，主界面在目标设备上；其次基于附加控制界面，得到操作屏幕；再后将操作屏幕投射到用户终端，以在用户终端生成操作界面；最后基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。从而在允许创建主界面之外，再创建一个附加控制界面到操作屏幕，并将操作屏幕投射到用户终端，得到操作界面，用户在用户终端直接操作操作界面，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果，从而实现了与用户终端直接播放视频时相同的效果，提高了设备间进行视频显示的灵活性，并且还提升了用户体验。
在本实施例一些可选实现方式中，上述投屏控制方法还包括：获取主界面的显示内容的内容列表；将内容列表添加至附加控制界面，并将内容列表同步投屏至用户终端；接收用户在操作界面上对内容列表的切换请求；获取与切换请求相对应的主界面的显示内容；在主界面上显示与切换请求相对应的显示内容。
本可选实现方式中，目标应用可以在主界面播放视频内容(此时视频内容即是主界面的显示内容)，同时将各个视频的内容列表渲染到附加控制界面；用户在用户终端上浏览内容列表并可以选择当前视频内容之外的其他视频内容进行播放，由此可以在不打断当前显示内容的情况下使用户浏览并选择其他视频内容，即无缝切换视频内容。
需要说明的是，本实施例中，用户终端可以是一个也可以是多个，当用户终端为多个时，各个用户终端的显示内容可以不同，并且每个用户终端均可以通过各自操作界面上的内容列表切换主界面的显示内容。
本可选实现方式提供的投屏控制方法，获取主界面的显示内容的内容列表，将内容列表添加至附加控制界面，将内容列表同步投屏至用户终端，从而在用户终端形成了一个具有内容列表的操作界面，用户通过切换操作界面上的内容列表，达到自主无缝切换主界面的显示内容的目的，提高了用户体验。
在本实施例一些可选实现方式中，上述投屏控制方法还包括：动态调整附加控制界面的布局；基于动态调整后的附加控制界面，得到新的操作屏幕；将新的操作屏幕投射到用户终端，以在用户终端生成新的操作界面；基于用户在新的操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
本可选实现方式中，目标设备上的目标应用可以根据自身需求或者执行主体的要求随时调整附加控制界面的布局，用户终端的界面分析模块根据AI算法实时识别更新的控制界面，或者根据目标设备提供的布局数据快速了解最新的布局情况。具体地，参考图4所示，为本实施例中的一个新的操作界面的示例性的结构示意图。
本可选实现方式提供的投屏控制方法，动态调整附加控制界面的布局，在用户终端动态生成不同的新的操作界面，使操作界面可以以多样形式进行展示，提高了用户体验。
为了便于用户对主界面上的视频进行操作，在本实施例的一些可选实现方式中，基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果包括：接收用户在操作界面中输入的弹幕文本；将弹幕文本上传至弹幕服务器；接收并在主界面上显示弹幕服务器发送的添加有弹幕文本的显示内容。
本实施例中，可以在用户终端的操作界面上设置弹幕输入框(如图3所示)，用户在用户终端点击弹幕输入框，执行主体可以根据事件处理列表找到弹幕输入框的事件类型为输入。用户终端启动本地输入法进行弹幕文本输入，并将输入的弹幕文本同步到执行主体；执行主体接收输入的文本发送至弹幕服务器，接收并在主界面上显示弹幕服务器发送的添加有弹幕文本的显示内容。
本可选实现方式中，接收到用户在操作界面中输入的弹幕文本之后，将弹幕文本上传至弹幕服务器，以使弹幕服务器将弹幕文本添加至对应的显示内容中，接收并在主界面上显示弹幕服务器发送的添加了弹幕文本的显示内容，保证了用户可以实时输入弹幕文本，并从目标设备观看添加了弹幕文本的显示内容。
针对执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果的方法，参考图5，示出了根据本公开的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法的一个实施例的流程500。该执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法包括以下步骤：
步骤501，接收用户在操作界面中输入的弹幕文本。
本实施例中，在用户终端的操作界面上可以设置有弹幕输入框(如图3所示)，当用户在弹幕输入框输入弹幕文本之后，执行主体可以通过通信模块与用户终端进行通信，从而得到用户在操作界面中输入的弹幕文本。
步骤502，将弹幕文本上传至弹幕服务器。
本实施例中，弹幕服务器是控制主界面的显示内容(显示内容可以是视频、图片、文本等等)的数据源，弹幕服务器采用弹幕存储数据库存储弹幕文本以及弹幕文本与其相应显示内容对应关系，每次在主界面显示显示内容时，相应的就可以显示出弹幕文本。
步骤503，接收并在主界面上显示弹幕服务器发送的包含弹幕文本的显示内容。
本实施例中，在主界面对显示内容进行显示时，弹幕服务器相应地从弹幕存储数据库中提取弹幕文本以及弹幕文本与显示内容对应关系，在主界面对包含弹幕文本的显示内容进行显示。
步骤504，将显示内容中的弹幕文本添加至附加控制界面。
本实施例中，将显示内容中的弹幕文本添加至附加控制界面，为了更好在用户终端的操作界面中显示弹幕文本。
步骤505，将弹幕文本同步投屏至用户终端，以在操作界面上显示弹幕文本。
本实施例中，用户在用户终端点击弹幕输入框，执行主体可以根据事件处理列表找到弹幕输入框的事件类型为输入。用户终端启动本地输入法进行弹幕文本输入，并将输入的弹幕文本同步到执行主体；执行主体接收输入的文本发送至弹幕服务器，接收并在主界面上显示弹幕服务器发送的添加有弹幕文本的显示内容，并在弹幕服务器下发添加有弹幕文本的显示内容之后，将弹幕文本同步投屏至用户终端。
本实施例中，用户在整个弹幕文本的输入过程均感觉不到目标设备的存在，如同在用户终端的本地应用输入一样，提高了用户体验。
本可选实现方式提供的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法，在从主界面上显示了添加弹幕文本的显示内容之后，将显示内容中的弹幕文本添加至附加控制界面，并将弹幕文本同步投影至用户终端。由此，在主界面上显示加载有弹幕文本的显示内容之后，将弹幕文本添加至附加控制界面，并同步在用户端终端显示，可以便于使用户核对弹幕文本的位置、信息，进一步地，提高了用户的体验。
继续参考图6，示出了根据本公开的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法的另一个实施例的流程600；该执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法包括以下步骤：
步骤601，接收用户在操作界面输出的分享请求。
本实施例中，在用户终端的操作界面上可以设置有消息控件(如图3所示消息按钮4)，消息控件用于发出分享请求。当用户消息控件被触发(比如点击)之后，用户终端与执行主体进行通信，并向执行主体输出分享请求。
步骤602，基于分享请求，获取与主界面的显示内容相对应的待分享信息。
本实施例中，分享请求包括待分享信息(比如显示内容对应的链接、图片等等)的类型、种类、数量等等属性。基于分享请求，确定待分享请求的属性，并且执行主体可以从提供显示内容的服务器获取与显示内容相对应的当前属性下的待分享信息，执行主体还可以从本地获取与显示内容相对应的当前属性下的待分享信息，将待分享信息显示在附加控制界面，以通过附加控制界面将待分享信息发送出去。
步骤603，将待分享信息发送给用户终端，以使用户终端启动第三方应用，并使第三方应用分享待分享信息。
本实施例中，用户可以点击图3所示的分享按钮，用户终端根据事件处理列表找到分享按钮的事件类型为分享；用户终端发送数据请求至目标设备，要求目标设备提供待分享信息；目标设备接收到请求后，返回待分享信息至用户终端，待分享信息比如为视频的URL和海报等，用户终端接收到目标设备返回的待分享信息，启动第三方应用(如微信、微博、邮箱等)，并使第三方应用对不同的对象(微信朋友圈、网址等)进行分享。
本可选实现方式提供的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法，用户在操作界面输入分享请求，获取与分享请求相对应的待分享信息，将待分享信息发送给用户终端，用户终端启动第三方应用分享待分享信息。本可实现方式，仅由操作界面输出分享请求就可以将第三方的待分享信息，发送给用户终端，以使用户终端启动第三应用，操作简单，提高了用户体验。
继续参考图7，示出了根据本公开的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法的另一个实施例的流程700；该执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法包括以下步骤：
步骤701，接收用户在操作界面输出的截取请求。
本实施例中，可以在操作界面设置截取控件(按钮、选择框等)，截取控件用于输出截取请求，截取请求包括需截取的主界面的显示内容的类型和数量等。
步骤702，基于截取请求，截取与主界面的当前显示内容相对应的截取信息。
本实施例中，基于截取请求，获取与截取请求相同的截取信息。本实施例中，截取信息是指与主界面的显示内容相同或相关的视频、图像等形式的内容。
本实施例中，执行主体可以将截取信息显示在附加控制界面，以通过附加控制界面将截取信息发送出去。
步骤703，将截取信息发送给用户终端。
本实施例中，用户点击操作界面上的截取控件，选择需截取的主界面的显示内容的类型(图片、视频片段或gif动画)、属性和数量，用户终端根据截取控件的事件处理列表找到事件类型为截取；用户终端根据截取控件的属性确定需截取的显示内容的信息，如，针对视频片段或gif动画，属性包括视频片段或gif动画开始时间和结束时间、gif动画帧率等，针对图片，属性包括图片的分辨率、规格等；用户终端发送截取请求以及需截取的主界面的显示内容的类型、属性和数量至执行主体。执行主体根据请求的数据类型、属性和数量，将截取到的内容发送至用户终端。
本可选实现方式提供的执行与操作请求相应的应用操作并通过主界面和/或附加控制界面显示执行结果的方法，接收用户输出的截取请求之后，基于截取请求，截取与主界面的当前显示内容相对应的截取信息，将截取信息发送给用户终端，以使用户终端显示截取信息并可以选择保存或者分享截取信息，由此，用户仅通过操作界面输出截取请求，并可以在操作界面显示与主界面当前显示内容相对应的截取信息，操作简单，容易实现，便于用户在用户终端得到目标设备上的显示内容。
针对上述实施例，目标应用还可以渲染多个相同或不同的附加控制界面并投射到不同的用户终端，多个用户可以分别在多个不同的用户终端上同时进行操作，通过采用多个不同用户终端进行不同的附加控制界面的显示，提高了用户终端显示的多样性。
进一步，对于目标设备上的游戏目标应用，可以渲染多个相同的附加控制界面并投射到不同的用户终端，由此可以实现多人游戏，不需要依赖游戏操作杆等外设，提高了用户体验。
进一步参考图8，作为对上述各图所示方法的实现，本公开提供了投屏控制装置的一个实施例，该装置实施例与图2所示的方法实施例相对应，该装置具体可以应用于各种电子设备中。
如图8所示，本实施例提供的投屏控制装置800包括创建单元801、得到单元802、生成单元803和控制单元804。其中，创建单元801，被配置成创建主界面和附加控制界面，主界面显示在目标设备上。得到单元802，被配置成基于附加控制界面，得到操作屏幕。生成单元803，被配置成将操作屏幕投射到用户终端，以在用户终端生成操作界面。控制单元804，被配置成基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
在本实施例中，投屏控制装置800中：创建单元801、得到单元802、生成单元803和控制单元804的具体处理及其所带来的技术效果可分别参考图2对应实施例中的步骤201、步骤202、步骤203和步骤204的相关说明，在此不再赘述。
在本实施例的一些可选的实现方式中，上述装置800还包括：建屏单元(图中未示出)。其中，上述建屏单元，可以被配置成创建虚拟屏幕。上述得到单元802，进一步可以被配置成将附加控制界面的内容添加至虚拟屏幕，得到操作屏幕。
在本实施例的一些可选的实现方式中，上述控制单元804包括：文本接收模块(图中未示出)，上传模块(图中未示出)，显示模块(图中未示出)。其中，上述文本接收模块，可以被配置成接收用户在操作界面中输入的弹幕文本。上述上传模块，可以被配置成将弹幕文本上传至弹幕服务器。上述显示模块，可以被配置成接收并在主界面上显示弹幕服务器发送的包含弹幕文本的显示内容。
在本实施例的一些可选的实现方式中，上述控制单元804还包括：添加模块(图中未示出)，同步模块(图中未示出)。其中，上述添加模块，可以被配置成将显示内容中的弹幕文本添加至附加控制界面。上述同步模块，可以被配置成将弹幕文本同步投屏至用户终端，以在操作界面上显示弹幕文本。
在本实施例的一些可选的实现方式中，上述控制单元804包括：分享接收模块(图中未示出)，获取模块(图中未示出)，启动模块(图中未示出)。其中，上述分享接收模块，可以被配置成接收用户在操作界面输出的分享请求。上述获取模块，可以被配置成基于分享请求，获取与主界面的显示内容相对应的待分享信息。上述启动模块，可以被配置成将待分享信息发送给用户终端，以使用户终端启动第三方应用，并使第三方应用分享待分享信息。
在本实施例的一些可选的实现方式中，上述控制单元804包括：截取接收模块(图中未示出)，截取模块(图中未示出)，发送模块(图中未示出)。其中，截取接收模块，可以被配置成接收用户在操作界面输出的截取请求。截取模块，可以被配置成基于截取请求，截取与主界面的当前显示内容相对应的截取信息。发送模块，可以被配置成将截取信息发送给用户终端。
在本实施例的一些可选的实现方式中，上述装置800还包括：调整单元(图中未示出)，操作单元(图中未示出)，投射单元(图中未示出)，操纵单元(图中未示出)。其中，调整单元，可以被配置成动态调整附加控制界面的布局。操作单元，可以被配置成基于动态调整后的附加控制界面，得到新的操作屏幕。投射单元，可以被配置成将新的操作屏幕投射到用户终端，以在用户终端生成新的操作界面。操纵单元，可以被配置成基于用户在新的操作界面的操作请求，执行与该操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
在本实施例的一些可选的实现方式中，上述装置800还包括：列表获取单元(图中未示出)，添加单元(图中未示出)，投屏单元(图中未示出)，切换接收单元(图中未示出)，内容获取单元(图中未示出)，显示单元(图中未示出)。其中，上述列表获取单元，可以被配置成获取主界面的显示内容的内容列表。上述添加单元，可以被配置成将内容列表添加至附加控制界面。上述投屏单元，可以被配置成将内容列表同步投屏至用户终端。上述切换接收单元，可以被配合成接收用户在操作界面上对内容列表的切换请求。上述内容获取单元，可以被配置成获取与切换请求相对应的主界面的显示内容。上述显示单元，可以被配置成在主界面上显示与切换请求相对应的显示内容。
本公开的实施例提供的投屏控制装置，首先创建单元801创建主界面和附加控制界面，主界面在目标设备上；其次得到单元802基于附加控制界面，得到操作屏幕；再后生成单元803将操作屏幕投射到用户终端，以在用户终端生成操作界面；最后控制单元804基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。从而在允许创建主界面之外，再创建一个附加控制界面到操作屏幕，并将操作屏幕投射到用户终端，得到操作界面，用户在用户终端直接操作操作界面，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果，从而实现了与用户终端直接播放视频时相同的效果，提高了设备间视频控制的灵活性，还提升了用户体验。
下面参考图9，下面参考图9，其示出了适于用来实现本公开的实施例的电子设备(例如图1中的服务器)900的结构示意图。图9示出的服务器仅仅是一个示例，不应对本公开的实施例的功能和使用范围带来任何限制。
如图9所示，电子设备900可以包括处理装置(例如中央处理器、图形处理器等)901，其可以根据存储在只读存储器(ROM)902中的程序或者从存储装置908加载到随机访问存储器(RAM)903中的程序而执行各种适当的动作和处理。在RAM 903中，还存储有电子设备900操作所需的各种程序和数据。处理装置901、ROM 902以及RAM903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。
通常，以下装置可以连接至I/O接口905：包括例如触摸屏、触摸板、键盘、鼠标、等的输入装置906；包括例如液晶显示器(LCD，Liquid Crystal Display)、扬声器、振动器等的输出装置907；包括例如磁带、硬盘等的存储装置908；以及通信装置909。通信装置909可以允许电子设备900与其他设备进行无线或有线通信以交换数据。虽然图9示出了具有各种装置的电子设备900，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图9中示出的每个方框可以代表一个装置，也可以根据需要代表多个装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置909从网络上被下载和安装，或者从存储装置908被安装，或者从ROM 902被安装。在该计算机程序被处理装置901执行时，执行本公开的实施例的方法中限定的上述功能。
需要说明的是，本公开的实施例的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的实施例中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的实施例中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(Radio Frequency，射频)等等，或者上述的任意合适的组合。
上述计算机可读介质可以是上述服务器中所包含的；也可以是单独存在，而未装配入该服务器中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该服务器执行时，使得该服务器：创建主界面和附加控制界面，主界面显示在目标设备上；基于附加控制界面，得到操作屏幕；将操作屏幕投射到用户终端，以在用户终端生成操作界面；基于用户在操作界面的操作请求，执行与操作请求相应的应用操作，并通过主界面和/或附加控制界面显示执行结果。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的实施例的操作的计算机程序代码，程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开的各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器，包括创建单元、得到单元、生成单元和控制单元。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定，例如，创建单元还可以被描述为“被配置成创建主界面和附加控制界面，所述主界面显示在目标设备上”的单元。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开的实施例中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (16)

1.一种投屏控制方法，所述方法包括：
采用目标应用创建主界面和附加控制界面，所述主界面显示在目标设备上；
基于所述附加控制界面，得到操作屏幕；
将所述操作屏幕投射到用户终端，以在用户终端生成操作界面包括：根据所述目标设备发送的布局数据，形成一个表征所述目标设备的布局和所述操作界面的事件的对应表，所述对应表还用于表示所述操作界面的事件与所述用户终端做出的响应之间的对应关系；
基于用户在所述操作界面的操作请求，执行与所述操作请求相应的应用操作，并通过所述主界面和/或所述附加控制界面显示执行结果，以使用户自主控制所述目标应用；
所述基于用户在所述操作界面的操作请求，执行与所述操作请求相应的应用操作，并通过所述主界面和/或所述附加控制界面显示执行结果，包括：
接收所述用户在所述操作界面中输入的弹幕文本；
将所述弹幕文本上传至弹幕服务器，以使所述弹幕服务器从弹幕存储数据库中提取弹幕文本以及弹幕文本与所述主界面显示内容对应关系；
接收并在所述主界面上显示所述弹幕服务器发送的包含所述弹幕文本的所述显示内容。
2.根据权利要求1所述的方法，所述方法还包括：
创建虚拟屏幕；
所述基于所述附加控制界面，得到操作屏幕包括：
将所述附加控制界面的内容添加至所述虚拟屏幕，得到操作屏幕。
3.根据权利要求1所述的方法，所述方法还包括：
将所述显示内容中的所述弹幕文本添加至所述附加控制界面，并将所述弹幕文本同步投屏至所述用户终端，以在所述操作界面上显示所述弹幕文本。
4.根据权利要求1所述的方法，所述基于用户在所述操作界面的操作请求，执行与所述操作请求相应的应用操作，并通过所述主界面和/或所述附加控制界面显示执行结果，包括：
接收所述用户在所述操作界面输出的分享请求；
基于所述分享请求，获取与所述主界面的显示内容相对应的待分享信息；
将所述待分享信息发送给所述用户终端，以使所述用户终端启动第三方应用，并使所述第三方应用分享所述待分享信息。
5.根据权利要求1所述的方法，所述基于用户在所述操作界面的操作请求，执行与所述操作请求相应的应用操作，并通过所述主界面和/或所述附加控制界面显示执行结果，包括：
接收所述用户在所述操作界面输出的截取请求；
基于所述截取请求，截取与所述主界面的当前显示内容相对应的截取信息；
将所述截取信息发送给所述用户终端。
6.根据权利要求1所述的方法，所述方法还包括：
动态调整所述附加控制界面的布局；
基于动态调整后的附加控制界面，得到新的操作屏幕；
将所述新的操作屏幕投射到用户终端，以在用户终端生成新的操作界面；
基于用户在所述新的操作界面的操作请求，执行与该操作请求相应的应用操作，并通过所述主界面和/或所述附加控制界面显示执行结果。
7.根据权利要求1-6之一所述的方法，所述方法还包括：
获取所述主界面的显示内容的内容列表；
将所述内容列表添加至所述附加控制界面，并将所述内容列表同步投屏至所述用户终端；
接收用户在所述操作界面上对所述内容列表的切换请求；
获取与所述切换请求相对应的所述主界面的显示内容；
在所述主界面上显示与所述切换请求相对应的显示内容。
8.一种投屏控制装置，所述装置包括：
创建单元，被配置成采用目标应用创建主界面和附加控制界面，所述主界面显示在目标设备上；
得到单元，被配置成基于所述附加控制界面，得到操作屏幕；
生成单元，被配置成将所述操作屏幕投射到用户终端，以在用户终端生成操作界面，所述生成单元进一步被配置成：根据所述目标设备发送的布局数据，形成一个表征所述目标设备的布局和所述操作界面的事件的对应表，所述对应表还用于表示所述操作界面的事件与所述用户终端做出的响应之间的对应关系；
控制单元，被配置成基于用户在所述操作界面的操作请求，执行与所述操作请求相应的应用操作，并通过所述主界面和/或所述附加控制界面显示执行结果，以使用户自主控制所述目标应用；
所述控制单元包括：
文本接收模块，被配置成接收所述用户在所述操作界面中输入的弹幕文本；
上传模块，被配置成将所述弹幕文本上传至弹幕服务器，以使所述弹幕服务器从弹幕存储数据库中提取弹幕文本以及弹幕文本与所述主界面显示内容对应关系；
显示模块，被配置成接收并在所述主界面上显示所述弹幕服务器发送的包含所述弹幕文本的所述显示内容。
9.根据权利要求8所述的装置，所述装置还包括：
建屏单元，被配置成创建虚拟屏幕；
所述得到单元，进一步被配置成将所述附加控制界面的内容添加至所述虚拟屏幕，得到操作屏幕。
10.根据权利要求8所述的装置，所述控制单元还包括：
添加模块，被配置成将所述显示内容中的所述弹幕文本添加至所述附加控制界面；
同步模块，被配置成将所述弹幕文本同步投屏至所述用户终端，以在所述操作界面上显示所述弹幕文本。
11.根据权利要求8所述的装置，其中，所述控制单元包括：
分享接收模块，被配置成接收所述用户在所述操作界面输出的分享请求；
获取模块，被配置成基于所述分享请求，获取与所述主界面的显示内容相对应的待分享信息；
启动模块，被配置成将所述待分享信息发送给所述用户终端，以使所述用户终端启动第三方应用，并使所述第三方应用分享所述待分享信息。
12.根据权利要求8所述的装置，其中，所述控制单元包括：
截取接收模块，被配置成接收所述用户在所述操作界面输出的截取请求；
截取模块，被配置成基于所述截取请求，截取与所述主界面的当前显示内容相对应的截取信息；
发送模块，被配置成将所述截取信息发送给所述用户终端。
13.根据权利要求8所述的装置，所述装置还包括：
调整单元，被配置成动态调整所述附加控制界面的布局；
操作单元，被配置成基于动态调整后的附加控制界面，得到新的操作屏幕；
投射单元，被配置成将所述新的操作屏幕投射到用户终端，以在用户终端生成新的操作界面；
操纵单元，被配置成基于用户在所述新的操作界面的操作请求，执行与所述操作请求相应的应用操作，并通过所述主界面和/或所述附加控制界面显示执行结果。
14.根据权利要求8-13之一所述的装置，所述装置还包括：
列表获取单元，被配置成获取所述主界面的显示内容的内容列表；
添加单元，被配置成将所述内容列表添加至所述附加控制界面；
投屏单元，被配置成将所述内容列表同步投屏至所述用户终端；
切换接收单元，被配合成接收用户在所述操作界面上对所述内容列表的切换请求；
内容获取单元，被配置成获取与所述切换请求相对应的所述主界面的显示内容；
显示单元，被配置成在所述主界面上显示与所述切换请求相对应的显示内容。
15.一种电子设备，包括：
一个或多个处理器；
存储装置，其上存储有一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
16.一种计算机可读介质，其上存储有计算机程序，其中，该程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN202011074118.0A 2020-10-09 2020-10-09 投屏控制方法、装置、电子设备以及计算机可读介质 Active CN112218144B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011074118.0A CN112218144B (zh) 2020-10-09 2020-10-09 投屏控制方法、装置、电子设备以及计算机可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011074118.0A CN112218144B (zh) 2020-10-09 2020-10-09 投屏控制方法、装置、电子设备以及计算机可读介质

Publications (2)

Publication Number Publication Date
CN112218144A CN112218144A (zh) 2021-01-12
CN112218144B true CN112218144B (zh) 2023-04-18

Family

ID=74054330

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011074118.0A Active CN112218144B (zh) 2020-10-09 2020-10-09 投屏控制方法、装置、电子设备以及计算机可读介质

Country Status (1)

Country Link
CN (1) CN112218144B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112860208A (zh) * 2021-04-25 2021-05-28 深圳乐播科技有限公司 基于投屏的软件共享方法、装置、设备及存储介质
CN113810761B (zh) * 2021-09-17 2023-11-21 上海哔哩哔哩科技有限公司 多终端交互方法、装置及系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625010B (zh) * 2012-03-06 2014-05-14 清华大学 一种Eye-Free的触屏手机控制电视的方法
CN102841757B (zh) * 2012-08-31 2015-04-08 深圳雷柏科技股份有限公司 一种基于智能终端的交互界面系统及其实现方法
CN103248937A (zh) * 2013-04-28 2013-08-14 深圳市爱渡飞科技有限公司 对数字电视终端的控制方法、系统以及相关设备
CN103645847A (zh) * 2013-12-02 2014-03-19 乐视致新电子科技（天津）有限公司 通过移动终端模拟鼠标控制智能电视的方法和系统
CN104010222A (zh) * 2014-04-28 2014-08-27 小米科技有限责任公司 评论信息展示方法、装置及系统
CN104735480B (zh) * 2015-04-03 2018-03-27 北京威扬科技有限公司 移动终端与电视之间的信息发送方法及系统
CN104967889A (zh) * 2015-06-30 2015-10-07 小米科技有限责任公司 控制智能电视进行视频信息处理的方法及装置
WO2018120768A1 (zh) * 2016-12-30 2018-07-05 华为技术有限公司 一种遥控方法和终端

Also Published As

Publication number Publication date
CN112218144A (zh) 2021-01-12

Similar Documents

Publication Publication Date Title
CN110046021B (zh) 一种页面显示方法、装置、系统、设备和存储介质
CN112433654B (zh) 页面展示方法、装置、电子设备和计算机可读介质
CN111277845B (zh) 游戏直播控制方法及装置、计算机存储介质及电子设备
CN106846040A (zh) 一种直播间中虚拟礼物显示方法和系统
US10951683B2 (en) Systems and methods for remote interaction
CN111541930B (zh) 直播画面的显示方法、装置、终端及存储介质
US11470127B2 (en) Method, system, and non-transitory computer-readable record medium for displaying reaction during VoIP-based call
CN112218144B (zh) 投屏控制方法、装置、电子设备以及计算机可读介质
WO2016150388A1 (zh) 界面处理方法、装置及系统
US20230101302A1 (en) Method and apparatus for displaying live broadcast interface
CN108965098B (zh) 基于在线直播的消息推送方法、装置、介质和电子设备
EP3466023B1 (en) Interactive display synchronisation
US20230029698A1 (en) Video interaction method and apparatus, electronic device, and computer-readable storage medium
CN107786631B (zh) 一种内容发布方法、装置及电子设备
WO2024022403A1 (zh) 任务的处理方法、装置、设备及存储介质
CN112055252A (zh) 多屏互动方法、装置、计算机可读介质及电子设备
CN114679628B (zh) 一种弹幕添加方法、装置、电子设备和存储介质
CN114697755A (zh) 虚拟场景信息交互方法、装置、设备以及存储介质
CN110673886A (zh) 用于生成热力图的方法和装置
WO2024078406A1 (zh) 一种数据展示方法、装置、电子设备和存储介质
US20230370686A1 (en) Information display method and apparatus, and device and medium
CN112511585B (zh) 一种基于安卓系统远程桌面的输入重定向方法及系统
CN105049927A (zh) 移动终端和电视间分享信息的方法及系统
CN114489891A (zh) 云应用程序的控制方法、系统、装置、可读介质和设备
CN114255084A (zh) 一种广告页面展示方法、装置及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant