CN113485626A - 一种智能显示设备、移动终端和显示控制方法 - Google Patents

一种智能显示设备、移动终端和显示控制方法 Download PDF

Info

Publication number
CN113485626A
CN113485626A CN202011090735.XA CN202011090735A CN113485626A CN 113485626 A CN113485626 A CN 113485626A CN 202011090735 A CN202011090735 A CN 202011090735A CN 113485626 A CN113485626 A CN 113485626A
Authority
CN
China
Prior art keywords
picture
mobile terminal
display
area
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011090735.XA
Other languages
English (en)
Inventor
李蕾
冯谨强
陈维强
高雪松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Hisense Electronic Industry Holdings Co Ltd
Original Assignee
Qingdao Hisense Electronic Industry Holdings Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Hisense Electronic Industry Holdings Co Ltd filed Critical Qingdao Hisense Electronic Industry Holdings Co Ltd
Priority to CN202011090735.XA priority Critical patent/CN113485626A/zh
Publication of CN113485626A publication Critical patent/CN113485626A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请提供一种智能显示设备、移动终端和显示控制方法,涉及显示设备技术领域。本申请提供的智能显示设备，在接收到移动终端发送的根据用户对显示屏幕的触控操作生成的控制信息后，可以根据控制信息来确定触控操作对应的控制指令，从而显示执行控制指令后的屏幕画面图像，并将执行控制指令后的屏幕画面图像投屏至移动终端。用户可以通过对移动终端显示屏幕的触控操作来实现对智能显示设备屏幕画面图像的控制。

Description

一种智能显示设备、移动终端和显示控制方法
技术领域
本申请实施例涉及显示技术领域，尤其涉及一种智能显示设备、移动终端和显示控制方法。
背景技术
随着智能电视的不断发展，智能电视的功能不断增多，人们不仅可以通过智能电视观看电视节目，还可以在智能电视上玩游戏、浏览商品、进行购物或其他活动等。
但是，由于智能电视通常通过遥控器进行控制，而遥控器上仅有有限数量的控制按键，限制了其对智能电视的控制操作。例如，用户在智能电视上玩游戏时，可以通过遥控器控制智能电视完成的游戏操作很少，操作很不方便。
发明内容
为解决现有存在的技术问题，本申请实施例提供一种智能显示设备、移动终端和显示控制方法，可以实现通过移动终端对智能显示设备进行控制。
为达到上述目的，本申请实施例的技术方案是这样实现的：
第一方面，本申请实施例提供一种智能显示设备，包括：
显示器，所述显示器用于显示画面；
通信组件，所述通信组件用于与移动终端通信连接，其中，所述通信组件用于将所述显示器当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端，以使所述移动终端显示所述至少一个部分画面区域或全部画面区域的图像，以及接收所述移动终端发送的控制信息，所述控制信息是根据用户对所述移动终端的显示画面的触控操作生成的；
处理器，所述处理器被配置为：根据接收到的所述控制信息确定所述触控操作对应的控制指令，并执行所述控制指令，且控制将所述显示器当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端。
本申请实施例提供的智能显示设备，在接收到移动终端发送的根据用户对显示屏幕的触控操作生成的控制信息后，可以根据控制信息来确定触控操作对应的控制指令，从而显示执行控制指令后的屏幕画面图像，并将执行控制指令后的屏幕画面图像的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端。用户可以通过对移动终端的显示画面的触控操作来实现对智能显示设备的显示画面的控制。
在一种可能的实现方式中，所述控制信息包括所述触控操作的坐标位置；所述处理器还被配置为：
从所述控制信息中获取所述触控操作的坐标位置；
根据所述触控操作的坐标位置确定所述触控操作对应的控制指令。
上述智能显示设备，在接收到移动终端发送的根据用户对显示屏幕的触控操作生成的控制信息后，可以从控制信息中获取触控操作的坐标位置，根据触控操作的坐标位置来确定触控操作对应的控制指令。从而可以准确地获取到用户对移动终端显示屏幕的触控操作的具体位置。
在一种可能的实现方式中，所述控制信息为截屏信息；所述处理器具体被配置为：
从所述截屏信息中获取局部画面区域的坐标信息；所述局部画面区域为用户从所述移动终端的显示画面中选择的区域；
在当前显示画面中获取所述局部画面区域的坐标信息对应的部分画面区域，且控制将获取的部分画面区域对应的图像数据发送至所述移动终端。
上述智能显示设备，在接收到移动终端发送的截屏信息后，可以从截屏信息中获取用户在移动终端的显示画面中选择的局部画面区域的坐标信息，根据局部画面区域的坐标信息，可以获取局部画面区域的坐标信息对应的部分画面区域，将获取的部分画面区域对应的图像数据发送至移动终端。从而实现用户可以在移动终端的显示画面中进行截屏操作，移动终端响应用户的截屏操作，对应显示智能显示设备的屏幕画面中的局部画面区域。
在一种可能的实现方式中，所述控制信息为添加截屏信息；所述处理器具体被配置为：
控制将所述显示器当前显示的全部画面区域对应的图像数据发送至所述移动终端，以使所述移动终端返回截屏信息，所述截屏信息中包括局部画面区域的坐标信息；或者，
记录所述移动终端当前显示的部分画面区域，并控制将所述显示器当前显示的全部画面区域对应的图像数据发送至所述移动终端。
上述智能显示设备，在接收到移动终端发送的添加截屏信息后，可以将当前显示的全部画面区域对应的图像数据发送至移动终端，使得用户可以在移动终端的显示画面中选择出局部画面区域。在接收到移动终端返回的截屏信息后，从截屏信息中获取局部画面区域的坐标信息。从而实现响应用户的添加截屏操作，移动终端可以将该添加截屏操作对应的添加截屏信息发送至智能显示设备，以使用户可以在移动终端的显示画面中进行截屏操作。
在一种可能的实现方式中，所述处理器具体被配置为：
若从所述截屏信息中获取到多个局部画面区域的坐标信息，根据每个局部画面区域的坐标信息，分别确定每个局部画面区域在当前显示画面中对应的部分画面区域，将得到的多个部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至所述移动终端；或者，
若存在已记录的部分画面区域，将获取的部分画面区域与已记录的部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至所述移动终端。
上述智能显示设备，在接收到移动终端发送的截屏信息后，可以从截屏信息中获取到用户选择的多个局部画面区域的坐标信息，根据每个局部画面区域的坐标信息，分别确定出每个局部画面区域在当前显示的屏幕画面图像中所对应的画面区域，从而得到多个画面区域，将得到的多个画面区域的画面图像进行拼接后，将拼接后的画面区域对应的图像数据发送至移动终端。也可以已经记录了之前的部分画面区域，在接收到移动终端发送的截屏信息后，将获取的部分画面区域与已记录的部分画面区域进行拼接，再将拼接后的画面区域对应的图像数据发送至移动终端。从而实现移动终端对智能显示设备的屏幕画面中的多个画面区域的对应显示。
在一种可能的实现方式中，所述处理器具体被配置为：
根据所述移动终端的显示界面的横纵比，调整获取的部分画面区域的显示比例。
上述智能显示设备，在接收到移动终端发送的用户选择的局部画面区域的坐标信息后，首先确定出局部画面区域在当前显示的屏幕画面图像中所对应的画面区域，然后根据移动终端的显示界面的横纵比，将得到的画面区域的显示比例进行调整，最后将调整显示比例后的画面区域对应图像数据发送至移动终端。可以使得调整显示比例后的画面图像更加适合移动终端的显示界面。
第二方面，本申请实施例提供一种移动终端，包括：
通信组件，所述通信组件用于与智能显示设备通信连接，其中，所述通信组件用于接收所述智能显示设备发送的图像数据；所述图像数据为所述智能显示设备当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据；
显示器，所述显示器用于显示接收到的所述图像数据对应的画面；
处理器，所述处理器被配置为：响应针对所述显示器的显示画面中的任意位置的触控操作，生成控制信息，并控制向所述智能显示设备发送所述控制信息，以使所述智能显示设备根据所述控制信息执行所述触控操作对应的控制指令。
本申请实施例提供的移动终端，响应用户针对于显示屏幕中的任意位置的触控操作，将触控操作生成控制信息，然后将控制信息发送给智能显示设备。在接收到智能显示设备发送的根据控制信息执行触控操作对应的控制指令后得到的屏幕画面图像后，将更新后的屏幕画面图像进行显示。用户可以通过对移动终端的显示屏幕指定位置的触控操作，来实现对智能显示设备的屏幕画面图像相应位置的控制。
在一种可能的实现方式中，所述控制信息中包括所述触控操作的坐标位置；所述控制指令是所述智能显示设备根据所述控制信息中的触控操作的坐标位置确定的。
在该实施例中，上述发送给智能显示设备的控制信息中包括有用户对显示屏幕进行触控操作的坐标位置，智能显示设备可以根据该坐标位置来确定出控制指令，从而可以根据用户对移动终端的显示屏幕的具体触控操作位置，来确定出在智能显示设备的屏幕画面中的对应控制位置。
在一种可能的实现方式中，所述控制信息为截屏信息；所述处理器具体被配置为：
响应针对所述显示器的显示画面中的截屏操作，生成截屏信息，并控制向所述智能显示设备发送所述截屏信息；所述截屏信息为用户在所述显示画面中选择的局部画面区域的坐标信息。
上述移动终端，响应接收到的用户对于显示屏幕的截屏操作，可以将截屏操作在屏幕画面图像中选择的局部画面区域的坐标信息发送给智能显示设备。在接收到智能显示设备返回的画面图像后，将该画面图像进行显示。从而实现移动终端可以显示用户选择的局部画面区域。
在一种可能的实现方式中，所述控制信息为添加截屏信息；所述处理器具体被配置为：
响应针对所述显示器的显示画面中的添加截屏操作，生成添加截屏信息，并控制向所述智能显示设备发送所述添加截屏信息。
上述移动终端，响应接收到的用户对于显示画面的添加截屏操作，可以根据该添加截屏操作生成添加截屏信息，并将添加截屏信息发送至智能显示设备。从而实现用户可以在移动终端的显示画面中选择多个局部画面区域。
第三方面，本申请实施例提供一种显示控制方法，包括：
将当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端；
接收所述移动终端发送的根据用户对显示画面的触控操作生成的控制信息，并根据所述控制信息确定所述触控操作对应的控制指令；
显示执行所述控制指令后的显示画面，并将执行所述控制指令后的显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至所述移动终端。
在一种可能的实现方式中，所述控制信息包括所述触控操作的坐标位置；根据所述控制信息确定所述触控操作对应的控制指令，包括：
从所述控制信息中获取所述触控操作的坐标位置；
根据所述触控操作的坐标位置确定所述触控操作对应的控制指令。
在一种可能的实现方式中，所述控制信息为截屏信息；根据所述控制信息确定所述触控操作对应的控制指令，包括：
从所述截屏信息中获取局部画面区域的坐标信息；所述局部画面区域为用户从所述移动终端的显示画面中选择的区域；
在当前显示画面中获取所述局部画面区域的坐标信息对应的部分画面区域，并将获取的部分画面区域对应的图像数据发送至所述移动终端。
在一种可能的实现方式中，所述控制信息为添加截屏信息；根据所述控制信息确定所述触控操作对应的控制指令，包括：
将当前显示的全部画面区域对应的图像数据发送至所述移动终端，以使所述移动终端返回截屏信息，所述截屏信息中包括局部画面区域的坐标信息；或者，
记录所述移动终端当前显示的部分画面区域，并将当前显示的全部画面区域对应的图像数据发送至所述移动终端。
在一种可能的实现方式中，所述将获取的部分画面区域对应的图像数据发送至所述移动终端，包括：
若从所述截屏信息中获取到多个局部画面区域的坐标信息，根据每个局部画面区域的坐标信息，分别确定每个局部画面区域在当前显示画面中对应的部分画面区域，将得到的多个部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至所述移动终端；或者，
若存在已记录的部分画面区域，将获取的部分画面区域与已记录的部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至所述移动终端。
在一种可能的实现方式中，在将获取的部分画面区域对应的图像数据发送至所述移动终端之前，所述方法还包括：
根据所述移动终端的显示界面的横纵比，调整获取的部分画面区域的显示比例。
第四方面，本申请实施例提供一种显示控制方法，包括：
基于接收到的智能显示设备发送的图像数据进行显示；所述图像数据为所述智能显示设备当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据；
响应针对显示画面中的任意位置的触控操作，向所述智能显示设备发送控制信息；
基于所述智能显示设备发送的更新后的显示画面的至少一个部分画面区域或全部画面区域对应的图像数据进行显示；所述更新后的显示画面是所述智能显示设备根据所述控制信息执行所述触控操作对应的控制指令后的显示画面。
在一种可能的实现方式中，所述控制信息中包括所述触控操作的坐标位置；所述控制指令是所述智能显示设备根据所述控制信息中的触控操作的坐标位置确定的。
在一种可能的实现方式中，所述控制信息为截屏信息；所述方法还包括：
响应针对所述显示器的显示画面中的截屏操作，生成截屏信息，并控制向所述智能显示设备发送所述截屏信息；所述截屏信息为用户在所述显示画面中选择的局部画面区域的坐标信息。
在一种可能的实现方式中，所述控制信息为添加截屏信息；所述方法还包括：
响应针对所述显示器的显示画面中的添加截屏操作，生成添加截屏信息，并控制向所述智能显示设备发送所述添加截屏信息。
第三方面中任意一种实现方式所带来的技术效果可参见第一方面的实现方式所带来的技术效果，此处不再赘述。
第四方面中任意一种实现方式所带来的技术效果可参见第二方面的实现方式所带来的技术效果，此处不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1中示例性地示出了一种智能显示设备的应用场景示意图；
图2中示例性地示出了本申请实施例提供的一种智能显示设备的结构示意图；
图3中示例性地示出了本申请实施例提供的一种移动终端的结构示意图；
图4中示例性地示出了本申请实施例提供的一种智能显示设备与移动终端的交互流程图；
图5中示例性地示出了本申请实施例提供的另一种智能显示设备与移动终端的交互流程图；
图6中示例性地示出了一种多人扑克游戏场景画面的示意图；
图7中示例性地示出了一种多人扑克游戏场景画面中局部画面区域选择的示意图；
图8中示例性地示出了一种多人扑克游戏场景画面中放大的局部画面区域的示意图；
图9中示例性地示出了一种多人扑克游戏场景画面中放大后的局部画面区域的示意图；
图10中示例性地示出了一种搏击类游戏场景画面的示意图；
图11中示例性地示出了一种搏击类游戏场景画面中局部画面区域选择的示意图；
图12中示例性地示出了一种搏击类游戏场景画面中放大的局部画面区域的示意图；
图13中示例性地示出了一种搏击类游戏场景画面中放大后的局部画面区域的示意图；
图14中示例性地示出了一种搏击类游戏场景画面中选择的局部画面区域的示意图；
图15中示例性地示出了一种搏击类游戏场景画面中增加局部画面区域选择的示意图；
图16中示例性地示出了另一种搏击类游戏场景画面中放大后的局部画面区域的示意图；
图17中示例性地示出了本申请实施例提供的一种显示控制方法的流程图；
图18中示例性地示出了本申请实施例提供的另一种显示控制方法的流程图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述，显然，所描述的实施例仅仅是本申请一部份实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。
图1中示例性地示出了一种智能显示设备的应用场景的示意图。如图1所示，移动终端100和智能显示设备200之间可以通过无线路由进行通信。
其中，移动终端100可以是智能设备，如手机、平板电脑、笔记本电脑等。例如，使用在智能设备上运行的应用程序控制智能显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上，通过直观的用户界面(UI)为用户提供各种控制。
智能显示设备200可提供广播接收功能和计算机支持功能的网络电视功能。智能显示设备可以实施为，数字电视、网络电视、互联网协议电视(IPTV)等。
智能显示设备200，可以是液晶显示器、有机发光显示器、投影设备等。具体智能显示设备类型、尺寸大小和分辨率等不作限定。
移动终端100可以通过无线路由向智能显示设备200发送客户端连接请求和媒体播放请求，智能显示设备200可以接收移动终端100发送的请求。移动终端100也可以将显示屏幕上的触摸坐标消息通过无线路由发送到智能显示设备。智能显示设备200可以通过无线路由将流媒体数据发送给移动终端100，移动终端100对该流媒体数据进行接收。
移动终端也可与智能显示设备安装软件应用，通过网络通信协议实现连接通信，实现一对一控制操作的和数据通信的目的。如：可以使移动终端与智能显示设备建立控制指令协议，通过操作移动终端上提供的用户界面的各种功能键或虚拟按钮，来实现如遥控器布置的实体按键的功能。也可以将移动终端上显示的音视频内容传输到智能显示设备上，实现同步显示功能。
智能显示设备200还与远端的服务器通过多种通信方式进行数据通信。这里可允许智能显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器可以向智能显示设备200提供各种内容和互动。示例的，智能显示设备200可以发送和接收信息，例如：接收电子节目指南(EPG)数据、接收软件程序更新、或访问远程储存的数字媒体库。服务器可以一组，也可以多组，可以一类或多类服务器。通过服务器提供视频点播和广告服务等其他网络服务内容。
智能显示设备200常与遥控器配合使用，遥控器包括红外协议通信或蓝牙协议通信，及其他短距离通信方式等，可以通过无线或其他有线方式来控制智能显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制智能显示设备200。如：用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令，来实现控制智能显示设备200的功能。
图2中示例性示出了本申请实施例提供的一种智能显示设备的结构示意图。如图2所示，本申请实施例提供的智能显示设备，包括处理器203、显示器202和通信组件201。
通信组件201，用于与移动终端建立通信连接。
处理器203，可以包括一个或多个中央处理单元(central processing unit，CPU)，或者数字处理单元等等。处理器203可以被配置为：通过通信组件201将显示器202当前显示的屏幕画面图像投屏至移动终端；通过通信组件201接收移动终端发送的根据用户对显示屏幕的触控操作生成的控制信息，并根据控制信息确定触控操作对应的控制指令；通过显示器202显示执行控制指令后的屏幕画面图像，并通过通信组件201将执行控制指令后的屏幕画面图像投屏至移动终端。
本申请实施例中不限定上述通信组件201、显示器202和处理器203之间的具体连接介质。本申请实施例在图2中，通信组件201、显示器202和处理器203之间通过总线204连接，其它部件之间的连接方式，仅是进行示意性说明，并不引以为限。所述总线204可以分为地址总线、数据总线、控制总线等。为便于表示，图2中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
图3中示例性示出了本申请实施例提供的一种移动终端的结构示意图。如图3所示，本申请实施例提供的移动终端，包括射频(Radio Frequency，RF)电路310、存储器320、输入单元330、显示器340、传感器350、音频电路360、无线保真(wireless fidelity，WiFi)模块370、处理器380等部件。本领域技术人员可以理解，图3中示出的移动终端结构并不构成对移动终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
下面结合图3对移动终端的各个构成部件进行具体的介绍：
RF电路310实现的是通信组件的功能，用于与智能显示设备建立通信连接。
存储器320可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个应用的应用程序等；存储数据区可存储根据移动终端的使用所创建的数据等。此外，存储器320可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
存储器320可用于存储程序代码和移动终端运行时所产生的数据信息。
处理器380可以显示通过RF电路310接收到的智能显示设备发送的屏幕画面图像。
处理器380还可以通过运行存储在存储器320的程序代码，从而实现以下过程：响应针对显示屏幕中的任意位置的触控操作，向智能显示设备发送控制信息；接收并显示智能显示设备发送的更新后的屏幕画面图像；更新后的屏幕画面图像是智能显示设备根据控制信息执行触控操作对应的控制指令后的屏幕画面图像。
输入单元330可用于接收用户输入的数字或字符信息，以及产生与终端的用户设置以及功能控制有关的键信号输入。
可选的，输入单元330可包括触控面板331以及其他输入设备332。
其中，触控面板331，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板331上或在触控面板331附近的操作)，并根据预先设定的程式实现相应的操作，如用户点击功能模块的快捷标识的操作等。可选的，触控面板331可以包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器380，并能接收处理器380发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板331。
可选的，其他输入设备332可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示器340可用于显示由用户输入的信息或展示给用户的界面信息以及移动终端的各种菜单。显示器340即为移动终端的显示系统，用于呈现界面，如显示桌面、应用的操作界面或直播应用的操作界面等。
显示器340可以包括显示面板341。可选的，显示面板341可以采用液晶显示屏(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置。
进一步的，触控面板331可覆盖显示面板341，当触控面板331检测到在其上或附近的触摸操作后，传送给处理器380以确定触摸事件的类型，随后处理器380根据触摸事件的类型在显示面板341上提供相应的界面输出。
虽然在图3中，触控面板331与显示面板341是作为两个独立的部件来实现移动终端的输入和输入功能，但是在某些实施例中，可以将触控面板331与显示面板341集成而实现终端的输入和输出功能。
移动终端还可包括至少一种传感器350，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板341的亮度，接近传感器可在移动终端移动到耳边时，关闭显示面板341的背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于电子设备还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
音频电路360、扬声器361，传声器362可提供用户与移动终端之间的音频接口。音频电路360可将接收到的音频数据转换后的电信号，传输到扬声器361，由扬声器361转换为声音信号输出；另一方面，传声器362将收集的声音信号转换为电信号，由音频电路360接收后转换为音频数据，再将音频数据输出处理器380处理后，经RF电路310以发送给比如另一移动终端，或者将音频数据输出至存储器320以便进一步处理。
WiFi属于短距离无线传输技术，移动终端通过WiFi模块370可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图3示出了WiFi模块370，但是可以理解的是，其并不属于移动终端的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。
处理器380是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器320内的软件程序和/或模块，以及调用存储在存储器320内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。可选的，处理器380可包括一个或多个处理单元；可选的，处理器380可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、应用及应用内部的功能模块等软件程序。调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器380中。
可以理解，图3所示的结构仅为示意，移动终端还可包括比图3中所示更多或者更少的组件，或者具有与图3所示不同的配置。图3中所示的各组件可以采用硬件、软件或其组合实现。
在一种实施例中，移动终端100与智能显示设备200之间的交互过程，如图4所示，包括如下步骤：
步骤S401，移动终端搜索连接智能显示设备。
智能显示设备200中集成有一个应用开放平台，该应用开放平台中配置有高通D845。高通D845中搭建有设备搜索服务，移动终端100可以通过该设备搜索服务搜索到智能显示设备200。移动终端100可以实现设备搜索功能，可以搜索同一局域网内的智能显示设备200，并接入智能显示设备200。
步骤S402，智能显示设备将当前显示的屏幕画面图像投屏至移动终端。
可选地，智能显示设备200可以将当前显示的屏幕画面图像进行录制，对录制得到的当前显示的屏幕画面图像逐帧进行编码，将编码后得到的流媒体数据通过无线网络发送到移动终端100。
具体地，高通D845中还搭建有流媒体服务器，可以将智能显示设备200当前显示的屏幕画面图像编码后得到的流媒体数据实时发送给移动终端100。
步骤S403，移动终端显示接收到的智能显示设备发送的屏幕画面图像。
移动终端100可以在接收到智能显示设备200发送的流媒体数据后，对接收到的流媒体数据进行解码，并显示解码后得到的屏幕画面图像。
具体地，移动终端100中设置有流媒体接收和播放模块，用于接收智能显示设备200发送的流媒体数据并实时播放。
步骤S404，移动终端响应针对显示屏幕中的任意位置的触控操作，生成控制信息。
步骤S405，移动终端将控制信息发送至智能显示设备。
在一种实施例中，控制信息中包括触控操作的坐标位置。移动终端100响应用户针对于显示屏幕中的任意位置的触控操作，将触控操作的坐标位置发送给智能显示设备200。
在另一种实施例中，智能显示设备200在将当前显示的屏幕画面图像投屏至移动终端100时，可以将当前显示的屏幕画面图像中的不同坐标位置对应的控制指令发送给移动终端100。移动终端100接收到用户在显示屏幕上的触控操作，可以根据触控操作的坐标位置确定触控操作对应的控制指令，生成包含控制指令的控制信息，发送至智能显示设备。
步骤S406，智能显示设备根据控制信息确定触控操作对应的控制指令，显示执行控制指令后的屏幕画面图像。
在一种实施例中，控制信息中包括触控操作的坐标位置。智能显示设备在接收到移动终端发送的触控操作的坐标位置后，首先将触控操作的坐标位置与当前显示的屏幕画面图像的坐标位置进行映射，确定出该触控操作在当前显示的屏幕画面图像中对应的坐标位置，并确定该坐标位置对应的控制指令，执行该控制指令，然后显示执行控制指令后变化得到的屏幕画面图像。
例如，智能显示设备和移动终端当前的显示屏幕上显示的画面为一个射击游戏场景画面，并且智能显示设备的屏幕画面大小为1920×1080，移动终端的显示屏幕大小为640×480。智能显示设备可以根据自身的屏幕画面与移动终端的显示屏幕之间的尺寸比例，将触控操作的坐标位置映射至当前显示的屏幕画面图像中，即确定触控操作的坐标位置对应的当前显示的屏幕画面图像中的坐标位置。如用户在移动终端的当前显示屏幕画面上进行触控操作的坐标为(320,240)，将该触控操作的坐标与智能显示设备的当前显示的屏幕画面上的坐标(960,540)相对应，并且坐标(960,540)对应的控制指令为发射子弹，智能显示设备执行发射子弹这个控制指令后，在当前的显示画面中会呈现一个手枪发射子弹的画面。
在另一种实施例中，控制信息中包括触控操作对应的控制指令。智能显示设备在接收到移动终端发送的触控操作对应的控制指令后，执行该控制指令，然后显示执行控制指令后变化得到的屏幕画面图像。
具体地，高通D845中搭建有事件收发及响应服务，用于接收移动终端100发送的控制指令和系统响应。移动终端100中设置有事件收发模块，用于向智能显示设备200发送控制指令。智能显示设备接收到移动终端发送的控制指令后，通过高通D845中搭建的事件收发及响应服务执行该控制指令。
步骤S407，智能显示设备将执行控制指令后的屏幕画面图像投屏至移动终端。
步骤S408，移动终端接收并显示智能显示设备发送的更新后的屏幕画面图像。
在另一种实施例中，考虑到智能显示设备将当前显示的屏幕画面全部投屏至移动终端会缩小屏幕画面图像，影响用户的观看和触控操作，进而影响用户的体验，还可以在智能显示设备将当前显示的屏幕画面投屏至移动终端后，将用户选择的显示屏幕画面中的某些局部画面区域进行放大。该实施例中移动终端100与智能显示设备200之间的交互图可以如图5所示，包括如下步骤：
步骤S501，移动终端搜索连接智能显示设备。
步骤S502，智能显示设备将当前显示的屏幕画面图像投屏至移动终端。
步骤S503，移动终端显示接收到的智能显示设备发送的屏幕画面图像。
移动终端100可以在接收到智能显示设备200发送的流媒体数据后，对接收到的流媒体数据进行解码，并显示解码后得到的屏幕画面图像。例如，图6所示的多人扑克游戏场景画面和图10所示的搏击游戏场景画面。
步骤S504，移动终端响应接收到的屏幕区域选择操作，根据屏幕区域选择操作在屏幕画面图像中选择局部画面区域。
步骤S505，移动终端将局部画面区域的坐标信息发送至智能显示设备。
移动终端100在接收并显示智能显示设备200发送的屏幕画面图像后，响应接收到的用户针对于屏幕画面图像中的屏幕区域的选择操作，可以将用户在屏幕画面图像中选择的局部画面区域的坐标信息发送给智能显示设备200。
在一种实施例中，局部画面区域可以是矩形或正方形区域。比如，用户可以在移动终端的屏幕画面图像中选择一个自己需要局部放大的画面区域。例如，用户可以长按移动终端的显示屏幕，显示屏幕上会出现一个“剪刀”图标，用户点击“剪刀”图标后，可以对自己选择的局部画面区域进行裁剪。或者，用户可以直接在移动终端的显示屏幕上进行滑动，将当前显示屏幕画面全部截图保存，然后用户可以在保存的截图中用图像编辑工具对自己选择的局部画面区域进行裁剪。移动终端可以将该矩形或正方形区域的左上顶点的坐标信息和右下顶点的坐标信息发送给智能显示设备。移动终端也可以将该矩形或正方形区域四个顶点的坐标信息发送给智能显示设备。例如，移动终端可以将如图7所示的多人扑克游戏场景画面中的出牌区域的顶点坐标发送给智能显示设备。
在另一种实施例中，局部画面区域可以是圆形或不规则形状的区域。比如，用户也可以在确定出自己需要选择的局部画面区域后，可以在移动终端的屏幕画面图像中随意划出一个封闭的区域，该封闭区域可以是不规则形状，该封闭区域中包含有用户需要选择的局部画面区域。移动终端可以将该封闭区域的边缘线上的每个点的坐标信息发送给智能显示设备。在得到包含有局部画面区域的封闭区域后，移动终端还可以该封闭区域中包含的局部画面内容进行自适应的显示修正，将修正后的区域的边缘线上的每个点的坐标信息发送给智能显示设备。
在一些实施例中，在用户完成局部画面区域的选择后，移动终端可以根据用户裁剪或划出的局部画面区域的大小对其做稍微的适配显示修正，使得修正后的画面图像更适合于移动终端的全屏显示。
在一种可选的实施方式中，移动终端可以将用户选择的多个局部画面区域的坐标信息发送给智能显示设备，智能显示设备在接收到移动终端发送的多个局部画面区域的坐标信息后，可以根据每个局部画面区域的坐标信息，分别确定每个局部画面区域在当前显示画面中对应的部分画面区域，从而可以得到多个部分画面区域。再将得到的多个部分画面区域的画面图像进行拼接后投屏至移动终端。
在一种可选的实施方式中，移动终端在显示一个或多个部分画面区域时，用户还可以添加需要显示的部分画面区域。
示例性地，在一种实施例中，移动终端可以响应用户在移动终端的显示画面上添加截屏区域的操作，移动终端可以将该添加截屏操作对应的添加截屏信息发送给智能显示设备。例如，如图13所示，移动终端正在显示第一个部分画面区域，此时，用户点击图13中所示的“添加”按键后，移动终端接收到用户添加截屏区域的操作，生成添加截屏信息发送至智能显示设备。智能显示设备在接收到添加截屏信息后，可以将当前显示的全部画面区域对应的图像数据发送给移动终端。移动终端在接收并显示智能显示设备发送的全部画面区域的图像，并在图像中标记之前显示的第一个部分画面区域，如图14所示。用户可以在当前显示的全部画面区域的图像中再选择一个或多个局部画面区域，移动终端响应用户在显示画面上选择局部画面区域的操作，可以生成包括这些局部画面区域的坐标信息和上述第一个部分画面区域对应的局部画面区域的坐标信息的截屏信息发送给智能显示设备。智能显示设备接收到移动终端发送的截屏信息，可以根据截屏信息中的多个局部画面区域的坐标信息，分别确定每个局部画面区域在当前显示画面中对应的部分画面区域，从而可以得到多个部分画面区域。再将得到的多个部分画面区域的画面图像进行拼接后投屏至移动终端。
在另一种实施例中，移动终端可以响应用户在移动终端的显示画面上添加截屏区域的操作，移动终端可以将该添加截屏操作对应的添加截屏信息发送给智能显示设备。智能显示设备在接收到添加截屏信息后，可以记录移动终端当前显示的部分画面区域，如图13中显示的部分画面区域的坐标信息。智能显示设备将当前显示的全部画面区域对应的图像数据发送给移动终端。移动终端在接收并显示智能显示设备发送的全部画面区域的图像，用户可以在当前显示的全部画面区域的图像中再选择一个或多个局部画面区域。以用户选择一个局部画面区域为例，移动终端响应用户在显示画面上选择局部画面区域的操作，可以生成包括该局部画面区域的坐标信息的截屏信息发送给智能显示设备。智能显示设备接收到移动终端发送的截屏信息，可以确定出该局部画面区域在当前显示画面中所对应的部分画面区域，并且将该部分画面区域与之前已经记录的部分画面区域进行拼接后将拼接后的画面区域对应的图像数据发送给移动终端。
步骤S506，智能显示设备接收移动终端发送的局部画面区域的坐标信息。
步骤S507，智能显示设备根据局部画面区域的坐标信息，确定当前显示的屏幕画面图像中对应的画面区域。
步骤S508，智能显示设备将画面区域的画面图像投屏至移动终端。
智能显示设备在接收到移动终端发送的用户选择的局部画面区域的坐标信息后，可以将该坐标信息进行映射，确定出在当前显示的屏幕画面图像中对应的画面区域。在一种实施例中，在确定出用户选择的局部画面区域对应的画面区域后，智能显示设备还可以根据移动终端的显示界面的横纵比，对该画面区域的画面图像的显示比例进行调整，然后将调整显示比例后的画面图像投屏到移动终端。
在另一种实施例中，在确定出用户选择的局部画面区域对应的画面区域后，可以将该画面区域投屏到移动终端。移动终端在接收到智能显示设备发送的画面区域后，可以根据显示界面的横纵比，对接收到的画面区域的画面图像的显示比例进行调整，使得调整显示比例后的画面图像更加适合移动终端的全屏显示，并显示调整显示比例后的画面图像。
在一种实施方式中，智能显示设备在接收到移动终端发送的用户选择的局部画面区域的坐标信息后，可以通过gst-launch-1.0构建Gstreamer管道，使用ximagesrc插件来实现对指定屏幕画面范围内的图像数据的截取，并对截取后的图像数据进行编码，将编码后的流媒体数据保存为文件。具体实现代码如下：
gst-launch-1.0ximagesrc startx＝1920starty＝0endx＝2943endy＝768show-pointer＝0use-damage＝0\
！video/x-raw,framerate＝30/1\
！videoconvert！vp8enc！matroskamux！filesink
location＝/home/nvidia/test/test.mkv
其中，startx、starty、endx、endy是用来指定屏幕画面范围的坐标。Startx为局部画面区域的横坐标开始点，为1920，endx为局部画面区域的横坐标结束点，为2943，starty为局部画面区域的纵坐标开始点，为0，endy为局部画面区域的纵坐标结束点，为768。
filesink location＝/home/nvidia/test/test.mkv用来保存流媒体数据。
步骤S509，移动终端接收并显示智能显示设备返回的画面图像。
步骤S510，移动终端响应针对显示屏幕中的任意位置的触控操作，生成控制信息。
步骤S511，移动终端将控制信息发送至智能显示设备。
步骤S512，智能显示设备根据控制信息确定触控操作对应的控制指令，显示执行控制指令后的屏幕画面图像。
步骤S513，智能显示设备将执行控制指令后的屏幕画面图像投屏至移动终端。
步骤S514，移动终端接收并显示智能显示设备发送的更新后的屏幕画面图像。
下面通过两个具体实施例来详细说明本申请的显示控制方法的实现过程。
实施例一：多人扑克场景。
在该实施例中，智能显示设备可以为电视，移动终端可以为手机。图6为电视端显示的一个虚拟的多人扑克游戏场景。电视端可以将该多人扑克游戏场景画面进行录制，逐帧进行编码，然后将编码后的流媒体数据通过无线网络发送给手机端。手机端在接收到来自电视端的流媒体数据后，将该流媒体数据进行解码，并将多人扑克游戏场景在显示屏幕中进行显示。
用户可以采用类似于屏幕截图的方式进行操作触控，选择自己需要进行放大的画面区域，如图7所示，用户可以选择将多人扑克游戏场景画面中的出牌区域进行放大，并且选择的出牌区域大小为256×110。用户还可以使用图7中最下面一行的图像编辑框里的工具自定义自己选择的出牌区域，可以得到如图8所示的放大的游戏场景画面，矩形实线框出的区域即为放大的出牌区域。在完成出牌区域选择后，手机端可以根据用户设置的出牌区域的大小做稍微的适配显示修正，使得修正后的图像更适合手机端的显示屏幕的全屏显示。如图8所示的虚线区域即为手机端自适应修正后的出牌区域。
手机端响应接收到的用户对于多人扑克游戏场景画面中的出牌区域的选择操作，可以将出牌区域的坐标信息发送给电视端。电视端在接收到手机端发送的出牌区域的坐标信息后，可以将该坐标信息与当前显示的多人扑克游戏场景画面的坐标信息进行映射，确定出该出牌区域在当前显示的多人扑克游戏场景画面中对应的画面区域，并将该画面区域录屏后发送给手机端。
手机端接收到电视端发送的画面区域后，将该画面区域在显示屏幕上进行显示，具体显示效果可以如图9所示。在如图9所示的出牌区域中，用户可以在显示屏幕中的任意位置进行触控操作，例如，用户可以选中某一张牌、点击“提示”、点击“过牌”、点击“出牌”等。手机端响应接收到的用户的触控操作，将进行触控操作的坐标信息发送给电视端。电视端在接收到手机端发送的触控操作的坐标信息后，将其与当前显示的场景画面的坐标信息进行映射，确定出触控操作对应的控制指令，并响应触控操作，执行对应的控制指令，做出对应的场景画面变化。
电视端可以将变化后的场景画面再根据之前用户选择出牌区域时的设定回传给手机端并进行显示。如此，就完成了通过手机端触控来操作电视端中的多人扑克游戏的功能。
实施例二：搏击游戏场景。
在该实施例中，智能显示设备可以为电视，移动终端可以为手机。图10为电视端上显示的一个虚拟的搏击游戏场景。电视端可以将该搏击游戏场景画面进行录制，逐帧进行编码，然后将编码后的流媒体数据通过无线网络发送给手机端。手机端在接收到来自电视端的流媒体数据后，将该流媒体数据进行解码，并将搏击游戏场景在显示屏幕中进行显示。
用户可以采用类似于屏幕截图的方式进行操作触控，选择自己需要进行放大的画面区域，如图11所示，用户可以选择将搏击游戏场景画面中的方向控制区域进行放大，并且选择的方向控制区域大小为196×176。用户还可以使用图11中最下面一行的图像编辑框里的工具自定义自己选择的方向控制区域，例如，用户可以对选择出的方向控制区域的上下左右四个边框进行拉伸或缩减，用户也可以放弃所选择出的方向控制区域，去选择将其他的区域进行放大等。可以得到如图12所示的放大的游戏场景画面，矩形实线框出的区域即为放大的方向控制区域。
在完成方向控制区域选择后，手机端可以根据用户设置的方向控制区域的大小做自适应的显示调整。在此基础上用户如果要添加多个需要放大显示的区域，可以在如图13所示的页面中通过功能键选择点击“添加”后，再次添加需要放大显示的画面区域。此时，手机端可以将添加截屏信息发送给电视端，电视端响应该“添加”操作，将显示屏幕上当前显示的搏击游戏场景全部画面发送给手机端，手机端在接收到电视端发送的全部画面区域后，可以在显示屏幕上显示全部的搏击游戏场景画面，如图14所示，其中包括了用户已经选择的方向控制区域。用户可以在当前显示的搏击游戏场景画面中选择将技能施放区域添加为需要放大显示的区域，如图15所示，用户可以选择将技能施放区域进行放大显示，并且选择的技能施放区域大小为210×200。
手机端在接收到用户将技能施放区域添加为需要放大显示的区域后，可以分别将用户选择的方向控制区域和技能施放区域的坐标信息发送给电视端。电视端在接收到手机端发送的方向控制区域和技能施放区域的坐标信息后，可以将其与当前显示的搏击游戏场景画面的坐标信息进行映射，确定出方向控制区域和技能施放区域在当前显示的搏击游戏场景画面中分别对应的画面区域，并对得到的两个画面区域分别进行录制后，拼接为一路视频数据流，将其发送给手机端。
在另一些实施例中，用户在手机端的显示屏幕上选择将方向控制区域作为放大显示的画面区域后，可以将方向控制区域的坐标信息发送给电视端。电视端在接收到方向控制区域的坐标信息后，可以将方向控制区域与当前显示的搏击游戏场景画面的坐标信息进行映射，确定出方向控制区域在当前显示的搏击游戏场景画面中对应的画面区域。手机端接收到用户点击“添加”操作后，生成添加截屏信息并发送给电视端。电视端响应该添加截屏信息，记录之前显示的部分画面区域——方向控制区域的坐标信息，并将显示屏幕上当前显示的搏击游戏场景全部画面发送给手机端。手机端在接收到电视端发送的全部画面区域后，可以在显示屏幕上显示全部的搏击游戏场景画面，如图14所示。用户可以在当前显示的搏击游戏场景画面中选择将技能施放区域添加为需要放大显示的区域，手机端在接收到用户将技能施放区域添加为需要放大显示的区域后，将用户选择的技能施放区域的坐标信息发送给电视端。电视端在接收到手机端发送的技能施放区域的坐标信息后，将技能施放区域与当前显示的搏击游戏场景画面的坐标信息进行映射，确定出技能施放区域在当前显示的搏击游戏场景画面中对应的画面区域，然后将已记录的方向控制区域对应的画面区域与接收到的技能施放区域对应的画面区域进行拼接，再将拼接后的画面区域对应的图像数据发送给手机端。
手机端接收到电视端发送的画面区域后，将该画面区域在显示屏幕上进行显示，具体显示效果可以如图16所示。在图16中，用户可以在手机端通过屏幕触控这两部分区域，手机端响应接收到的用户的触控操作，将进行触控操作的坐标信息发送给电视端。电视端在接收到手机端发送的触控操作的坐标信息后，将其与当前显示的场景画面的坐标信息进行映射，确定出触控操作对应的控制指令，并响应触控操作，执行对应的控制指令，做出对应的场景画面变化。
电视端可以将变化后的场景画面再根据之前用户选择出牌区域时的设定回传给手机端并进行显示。如此，就完成了通过手机端触控来操作电视端中的搏击游戏的功能。
基于同一发明构思，本发明实施例中还提供了一种显示控制方法。由于该显示控制方法对应的是本发明实施例智能显示设备对应的方法，并且该方法解决问题的原理与该智能显示设备相似，因此该方法的实施可以参见上述智能显示设备的实施，重复之处不再赘述。
图17示出了本申请实施例提供的一种显示控制方法的流程示意图。如图17所示，该显示控制方法具体包括如下步骤：
步骤S1701，将当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端。
在一些实施例中，可以将当前显示的屏幕画面图像对应的全部图像数据发送至移动终端，使移动终端可以显示智能显示设备当前显示的屏幕画面图像的全部内容，即智能显示设备将当前显示的屏幕画面图像的全部区域投屏至移动终端。在另一些实施例中，可以将当前显示的屏幕画面图像对应的部分图像数据发送至移动终端，使移动终端可以显示智能显示设备当前显示的屏幕画面图像的部分内容，即智能显示设备将当前显示的屏幕画面图像的部分区域投屏至移动终端。
步骤S1702，接收移动终端发送的根据用户对显示画面的触控操作生成的控制信息，并根据控制信息确定触控操作对应的控制指令。
步骤S1703，显示执行控制指令后的显示画面，并将执行控制指令后的显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端。
在一种可能的实现方式中，控制信息包括所述触控操作的坐标位置；根据控制信息确定触控操作对应的控制指令，包括：
从控制信息中获取触控操作的坐标位置；
根据触控操作的坐标位置确定触控操作对应的控制指令。
在一种可能的实现方式中，控制信息为截屏信息；该方法还包括：
从截屏信息中获取局部画面区域的坐标信息；局部画面区域为用户从移动终端的显示画面中选择的区域；
在当前显示画面中获取局部画面区域的坐标信息对应的部分画面区域，且控制将获取的部分画面区域对应的图像数据发送至移动终端。
在一种可能的实现方式中，控制信息为添加截屏信息；该方法还包括：
控制将显示器当前显示的全部画面区域对应的图像数据发送至移动终端，以使移动终端返回截屏信息，截屏信息中包括局部画面区域的坐标信息；或者，
记录移动终端当前显示的部分画面区域，并控制将显示器当前显示的全部画面区域对应的图像数据发送至移动终端。
在一种可能的实现方式中，该方法还包括：
若从截屏信息中获取到多个局部画面区域的坐标信息，根据每个局部画面区域的坐标信息，分别确定每个局部画面区域在当前显示画面中对应的部分画面区域，将得到的多个部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至移动终端；或者，
若存在已记录的部分画面区域，将获取的部分画面区域与已记录的部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至移动终端。
在一种可能的实现方式中，该方法还包括：
根据移动终端的显示界面的横纵比，调整获取的部分画面区域的显示比例。
基于同一发明构思，本发明实施例中还提供了一种显示控制方法。由于该显示控制方法对应的是本发明实施例移动终端对应的方法，并且该方法解决问题的原理与该移动终端相似，因此该方法的实施可以参见上述移动终端的实施，重复之处不再赘述。
图18示出了本申请实施例提供的一种显示控制方法的流程示意图。如图18所示，该显示控制方法具体包括如下步骤：
步骤S1801，基于接收到的智能显示设备发送的图像数据进行显示。
所述图像数据为智能显示设备当前显示的屏幕画面图像对应的部分或全部图像数据。
步骤S1802，响应针对显示画面中的任意位置的触控操作，向智能显示设备发送控制信息。
步骤S1803，基于所述智能显示设备发送的更新后的显示画面的至少一个部分画面区域或全部画面区域对应的图像数据进行显示。
该更新后的屏幕画面图像是智能显示设备根据控制信息执行触控操作对应的控制指令后的屏幕画面图像。
在一种可能的实现方式中，控制信息中包括触控操作的坐标位置；控制指令是智能显示设备根据控制信息中的触控操作的坐标位置确定的。
在一种可能的实现方式中，控制信息为截屏信息；该方法还包括：
响应针对显示器的显示画面中的截屏操作，生成截屏信息，并控制向智能显示设备发送截屏信息；截屏信息为用户在所述显示画面中选择的局部画面区域的坐标信息。
在一种可能的实现方式中，控制信息为添加截屏信息；该方法还包括：
响应针对显示器的显示画面中的添加截屏操作，生成添加截屏信息，并控制向智能显示设备发送添加截屏信息。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种智能显示设备，其特征在于，包括：
显示器，所述显示器用于显示画面；
通信组件，所述通信组件用于与移动终端通信连接，其中，所述通信组件用于将所述显示器当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端，以使所述移动终端显示所述至少一个部分画面区域或全部画面区域的图像，以及接收所述移动终端发送的控制信息，所述控制信息是根据用户对所述移动终端的显示画面的触控操作生成的；
处理器，所述处理器被配置为：根据接收到的所述控制信息确定所述触控操作对应的控制指令，并执行所述控制指令，且控制将所述显示器当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端。
2.根据权利要求1所述的智能显示设备，其特征在于，所述控制信息包括所述触控操作的坐标位置；所述处理器还被配置为：
从所述控制信息中获取所述触控操作的坐标位置；
根据所述触控操作的坐标位置确定所述触控操作对应的控制指令。
3.根据权利要求1所述的智能显示设备，其特征在于，所述控制信息为截屏信息；所述处理器具体被配置为：
从所述截屏信息中获取局部画面区域的坐标信息；所述局部画面区域为用户从所述移动终端的显示画面中选择的区域；
在当前显示画面中获取所述局部画面区域的坐标信息对应的部分画面区域，且控制将获取的部分画面区域对应的图像数据发送至所述移动终端。
4.根据权利要求3所述的智能显示设备，其特征在于，所述控制信息为添加截屏信息；所述处理器具体被配置为：
控制将所述显示器当前显示的全部画面区域对应的图像数据发送至所述移动终端，以使所述移动终端返回截屏信息，所述截屏信息中包括局部画面区域的坐标信息；或者，
记录所述移动终端当前显示的部分画面区域，并控制将所述显示器当前显示的全部画面区域对应的图像数据发送至所述移动终端。
5.根据权利要求4所述的智能显示设备，其特征在于，所述处理器具体被配置为：
若从所述截屏信息中获取到多个局部画面区域的坐标信息，根据每个局部画面区域的坐标信息，分别确定每个局部画面区域在当前显示画面中对应的部分画面区域，将得到的多个部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至所述移动终端；或者，
若存在已记录的部分画面区域，将获取的部分画面区域与已记录的部分画面区域进行拼接，并控制将拼接后的画面区域对应的图像数据发送至所述移动终端。
6.根据权利要求3所述的智能显示设备，其特征在于，所述处理器具体被配置为：
根据所述移动终端的显示界面的横纵比，调整获取的部分画面区域的显示比例。
7.一种移动终端，其特征在于，包括：
通信组件，所述通信组件用于与智能显示设备通信连接，其中，所述通信组件用于接收所述智能显示设备发送的图像数据；所述图像数据为所述智能显示设备当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据；
显示器，所述显示器用于显示接收到的所述图像数据对应的画面；
处理器，所述处理器被配置为：响应针对所述显示器的显示画面中的任意位置的触控操作，生成控制信息，并控制向所述智能显示设备发送所述控制信息，以使所述智能显示设备根据所述控制信息执行所述触控操作对应的控制指令。
8.根据权利要求7所述的移动终端，其特征在于，所述控制信息中包括所述触控操作的坐标位置；所述控制指令是所述智能显示设备根据所述控制信息中的触控操作的坐标位置确定的。
9.一种显示控制方法，其特征在于，包括：
将当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至移动终端；
接收所述移动终端发送的根据用户对显示画面的触控操作生成的控制信息，并根据所述控制信息确定所述触控操作对应的控制指令；
显示执行所述控制指令后的显示画面，并将执行所述控制指令后的显示画面的至少一个部分画面区域或全部画面区域对应的图像数据发送至所述移动终端。
10.一种显示控制方法，其特征在于，包括：
基于接收到的智能显示设备发送的图像数据进行显示；所述图像数据为所述智能显示设备当前显示画面的至少一个部分画面区域或全部画面区域对应的图像数据；
响应针对显示画面中的任意位置的触控操作，向所述智能显示设备发送控制信息；
基于所述智能显示设备发送的更新后的显示画面的至少一个部分画面区域或全部画面区域对应的图像数据进行显示；所述更新后的显示画面是所述智能显示设备根据所述控制信息执行所述触控操作对应的控制指令后的显示画面。
CN202011090735.XA 2020-10-13 2020-10-13 一种智能显示设备、移动终端和显示控制方法 Pending CN113485626A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011090735.XA CN113485626A (zh) 2020-10-13 2020-10-13 一种智能显示设备、移动终端和显示控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011090735.XA CN113485626A (zh) 2020-10-13 2020-10-13 一种智能显示设备、移动终端和显示控制方法

Publications (1)

Publication Number Publication Date
CN113485626A true CN113485626A (zh) 2021-10-08

Family

ID=77932564

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011090735.XA Pending CN113485626A (zh) 2020-10-13 2020-10-13 一种智能显示设备、移动终端和显示控制方法

Country Status (1)

Country Link
CN (1) CN113485626A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114938468A (zh) * 2022-04-22 2022-08-23 海信视像科技股份有限公司 显示设备、屏幕控制方法及存储介质
CN114979740A (zh) * 2022-06-21 2022-08-30 北京奇艺世纪科技有限公司 终端互动方法、系统、电子设备及计算机可读存储介质
WO2024045985A1 (zh) * 2022-08-31 2024-03-07 京东方科技集团股份有限公司 屏幕控制方法、屏幕控制装置、电子设备、程序及介质
WO2024114069A1 (zh) * 2022-11-29 2024-06-06 京东方科技集团股份有限公司 一种多设备协同控制的方法、显示设备及系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110300910A1 (en) * 2010-06-04 2011-12-08 Kyungdong Choi Mobile terminal capable of providing multiplayer game and method of controlling operation of the mobile terminal
CN103000015A (zh) * 2012-12-13 2013-03-27 深圳Tcl新技术有限公司 基于无线传屏的显示设备精确遥控方法和装置
CN104331243A (zh) * 2014-10-22 2015-02-04 积成电子股份有限公司 基于缩略图重构的移动终端与大屏显示互动控制方法
CN104951080A (zh) * 2015-07-06 2015-09-30 联想(北京)有限公司 一种控制方法以及装置
CN105227996A (zh) * 2015-10-28 2016-01-06 努比亚技术有限公司 一种智能电视终端快速截屏的方法和系统
CN105760050A (zh) * 2016-02-04 2016-07-13 上海卓易科技股份有限公司 一种截图方法及装置
CN105992064A (zh) * 2015-01-31 2016-10-05 乐视致新电子科技（天津）有限公司 一种分享截图的方法、装置及系统
CN107896279A (zh) * 2017-11-16 2018-04-10 维沃移动通信有限公司 一种移动终端的截屏处理方法、装置及移动终端
CN110064192A (zh) * 2019-04-08 2019-07-30 努比亚技术有限公司 游戏界面控制方法、移动终端及计算机可读存储介质
CN110087124A (zh) * 2019-06-05 2019-08-02 聚好看科技股份有限公司 智能电视的远程控制方法、终端设备和智能电视

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110300910A1 (en) * 2010-06-04 2011-12-08 Kyungdong Choi Mobile terminal capable of providing multiplayer game and method of controlling operation of the mobile terminal
CN103000015A (zh) * 2012-12-13 2013-03-27 深圳Tcl新技术有限公司 基于无线传屏的显示设备精确遥控方法和装置
CN104331243A (zh) * 2014-10-22 2015-02-04 积成电子股份有限公司 基于缩略图重构的移动终端与大屏显示互动控制方法
CN105992064A (zh) * 2015-01-31 2016-10-05 乐视致新电子科技（天津）有限公司 一种分享截图的方法、装置及系统
CN104951080A (zh) * 2015-07-06 2015-09-30 联想(北京)有限公司 一种控制方法以及装置
CN105227996A (zh) * 2015-10-28 2016-01-06 努比亚技术有限公司 一种智能电视终端快速截屏的方法和系统
CN105760050A (zh) * 2016-02-04 2016-07-13 上海卓易科技股份有限公司 一种截图方法及装置
CN107896279A (zh) * 2017-11-16 2018-04-10 维沃移动通信有限公司 一种移动终端的截屏处理方法、装置及移动终端
CN110064192A (zh) * 2019-04-08 2019-07-30 努比亚技术有限公司 游戏界面控制方法、移动终端及计算机可读存储介质
CN110087124A (zh) * 2019-06-05 2019-08-02 聚好看科技股份有限公司 智能电视的远程控制方法、终端设备和智能电视

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114938468A (zh) * 2022-04-22 2022-08-23 海信视像科技股份有限公司 显示设备、屏幕控制方法及存储介质
CN114979740A (zh) * 2022-06-21 2022-08-30 北京奇艺世纪科技有限公司 终端互动方法、系统、电子设备及计算机可读存储介质
WO2024045985A1 (zh) * 2022-08-31 2024-03-07 京东方科技集团股份有限公司 屏幕控制方法、屏幕控制装置、电子设备、程序及介质
WO2024114069A1 (zh) * 2022-11-29 2024-06-06 京东方科技集团股份有限公司 一种多设备协同控制的方法、显示设备及系统
WO2024113187A1 (zh) * 2022-11-29 2024-06-06 京东方科技集团股份有限公司 一种多设备协同控制的方法、显示设备及系统

Similar Documents

Publication Publication Date Title
CN110636324B (zh) 界面显示方法、装置、计算机设备及存储介质
CN111417028B (zh) 信息处理方法、装置、存储介质及电子设备
CN108235086B (zh) 视频播放控制方法、装置及相应的终端
CN113485626A (zh) 一种智能显示设备、移动终端和显示控制方法
CN111491197B (zh) 一种直播内容展示的方法、装置及存储介质
CN106658038A (zh) 基于视频流的直播交互方法及其相应的装置
CN105230005A (zh) 显示装置及其控制方法
CN106303733B (zh) 播放直播特效信息的方法和装置
CN112969087B (zh) 一种信息展示方法、客户端、电子设备及存储介质
WO2012001428A1 (en) Mobile computing device
CN112817453A (zh) 虚拟现实设备和虚拟现实场景中物体的视线跟随方法
CN107908765B (zh) 一种游戏资源处理方法、移动终端及服务器
WO2020248697A1 (zh) 显示设备及视频通讯数据处理方法
KR20240010068A (ko) 디스플레이 장치
KR20180016805A (ko) 디스플레이 장치 및 그의 동작 방법
CN117008713A (zh) 一种增强现实显示方法、装置及计算机可读存储介质
CN115643445A (zh) 交互处理方法、装置、电子设备及存储介质
CN113797527B (zh) 一种游戏处理方法、装置、设备、介质及程序产品
CN113068071B (zh) 信息展示方法、客户端、服务器、电子设备及存储介质
CN111880422B (zh) 设备控制方法及装置、设备、存储介质
CN114100121A (zh) 操作控制方法、装置、设备、存储介质及计算机程序产品
KR20150128090A (ko) 영상 표시 기기
JP5779735B1 (ja) プログラム、ゲームの制御方法、および情報処理装置
JP5841287B1 (ja) プログラム、ゲームの制御方法、および情報処理装置
CN114827700B (zh) 投屏内容的显示方法、装置、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Country or region after: China

Address after: 266555, No. 218, Bay Road, Qingdao economic and Technological Development Zone, Shandong

Applicant after: Hisense Group Holding Co.,Ltd.

Address before: 218 Qianwangang Road, Qingdao Economic and Technological Development Zone, Shandong Province

Applicant before: QINGDAO HISENSE ELECTRONIC INDUSTRY HOLDING Co.,Ltd.

Country or region before: China