CN104580289B - 一种对用户设备进行控制的方法、装置和系统 - Google Patents

一种对用户设备进行控制的方法、装置和系统 Download PDF

Info

Publication number
CN104580289B
CN104580289B CN201310481699.3A CN201310481699A CN104580289B CN 104580289 B CN104580289 B CN 104580289B CN 201310481699 A CN201310481699 A CN 201310481699A CN 104580289 B CN104580289 B CN 104580289B
Authority
CN
China
Prior art keywords
user equipment
image information
control device
sent
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310481699.3A
Other languages
English (en)
Other versions
CN104580289A (zh
Inventor
金剑
杨晓霞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201310481699.3A priority Critical patent/CN104580289B/zh
Publication of CN104580289A publication Critical patent/CN104580289A/zh
Application granted granted Critical
Publication of CN104580289B publication Critical patent/CN104580289B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明公开了一种对用户设备进行控制的方法、装置和系统，主要内容包括：控制设备接收第一用户设备发送的在用户向所述第一设备中显示的第二用户设备发出操作指令时采集到的图像信息，并根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令，将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令，这样实现对第一用户设备中显示的第二用户设备的控制操作，使得在一个用户设备中利用“画中画”技术实现多屏互动下的控制，提高了多屏互动中显示资源的利用率。

Description

一种对用户设备进行控制的方法、装置和系统
技术领域
本发明涉及无线通信领域，尤其涉及一种对用户设备进行控制的方法、装置和系统。
背景技术
随着科学技术的发展，移动终端设备与智能多媒体终端设备之间的多屏互动应用越来越多。例如：手机、平板电脑等移动终端设备与电视、投影仪等显示设备之间，通过智能机顶盒或者类似智能机顶盒产品进行多屏互动。
目前，多屏互动应用的实现方式主要包括以下两种：第一种方式是，将移动终端设备上存储的媒体资源通过标准的DLNA（Digital Living Network Alliance，数字直播网络联盟）协议推送到媒体终端设备上播放，在移动终端设备和多媒体终端设备之间实现多媒体资源共享；第二种方式是，发送端（通常是移动终端，也可以是显示设备）利用WMPT（Wireless Mobile Multimedia Transmission Protocol，天线多媒体传输协议）对实时音频界面内容进行压缩，并在接收端（通常是显示设备，也可以是移动终端）进行解码，并呈现。
由此可见，当前的多屏互动旨在：将两个不同的设备通过无线的方式连接，采用一种无线多媒体协议对一个设备内显示的音视频、图像等进行编码、传输和解码，并将该内容显示在另一个设备中。
也就是说的，当前的多屏互动只是简单的将一个设备中显示的内容，通过无线的方式显示在另一个设备中，并不能通过一个设备对另一个设备进行控制，使得多屏互动应用存在局限性，浪费了多屏互动的显示资源，无法满足用户对多个用户设备的应用体验。
发明内容
本发明实施例提供了一种对用户设备进行控制的方法、设备和系统，用于解决当前的多屏互动简单的将一个设备中显示的内容通过无线的方式显示在另一个设备中，无法通过一个设备对另一个设备进行控制，使得多屏互动应用存在局限性，浪费多屏互动的显示资源的问题。
一种对用户设备进行控制的方法，应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中，包括：
控制设备接收第一用户设备发送的图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的；
所述控制设备根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令；并
将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令。
将确定的所述控制指令发送给所述第二用户设备，包括：
所述控制设备将确定的所述控制指令进行编码压缩处理，以WiMo多媒体消息的形式发送给所述第二用户设备，其中，所述WiMo多媒体消息中包含了所述控制指令对应的操作码。
所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令，包括：
在第二用户设备接收到所述控制设备发送的WiMo多媒体消息之后，所述第二用户对接收到的所述WiMo多媒体消息进行解压缩，读取所述WiMo多媒体消息中的操作码，并根据所述操作码响应所述用户发出的操作指令。
所述方法还包括：
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中；
其中，所述第二用户设备显示在第一用户设备中的指定位置。
所述状态信息为已连接状态信息；
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中，包括：
所述控制设备获取已连接状态下的所述第二用户设备的图像信息，并将所述已连接状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
所述状态信息为已响应状态信息；
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中，包括：
所述控制设备获取已响应状态下的所述第二用户设备的图像信息，并将所述已响应状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
所述指定位置满足：用于显示所述第二用户设备的状态信息的区域小于所述第一用户设备的显示区域。
一种对用户设备进行控制的控制装置，应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中，包括：
接收模块，用于接收第一用户设备发送的图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的；
确定模块，用于根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令；
控制模块，用于将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令。
所述控制模块，具体用于将确定的所述控制指令进行编码压缩处理，以WiMo多媒体消息的形式发送给所述第二用户设备，其中，所述WiMo多媒体消息中包含了所述控制指令对应的操作码。
所述控制装置还包括：获取模块，其中：
所述获取模块，用于获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中；
其中，所述第二用户设备显示在第一用户设备中的指定位置。
所述状态信息为已连接状态信息；
所述获取模块，具体用于获取已连接状态下的所述第二用户设备的图像信息，并将所述已连接状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
所述状态信息为已响应状态信息；
所述获取模块，具体用于获取已响应状态下的所述第二用户设备的图像信息，并将所述已响应状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
一种对用户设备进行控制的系统，应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中，包括：
第一用户设备，用于向控制设备发送图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的；
控制设备，用于接收第一用户设备发送的图像信息，根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令；并将确定的所述控制指令发送给所述第二用户设备；
第二用户设备，用于根据接收到的所述控制指令响应所述用户发出的操作指令。
本发明有益效果如下：
本发明实施例通过控制设备接收第一用户设备发送的在用户向所述第一设备中显示的第二用户设备发出操作指令时采集到的图像信息，并根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令，将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令，这样，对于显示在第一用户设备中的第二用户设备，控制设备利用用户针对第一用户设备做出的操作指令的图像信息，确定用于控制第二用户设备的控制指令，实现对第一用户设备中显示的第二用户设备的控制操作，使得在一个用户设备中利用“画中画”技术实现多屏互动下的控制，提高了多屏互动中显示资源的利用率。
附图说明
图1为本发明实施例一提供的一种对用户设备进行控制的方法的流程示意图；
图2为本发明实施例二提供的一种对用户设备进行控制的方法的流程示意图；
图3为本发明实施例三提供的一种对用户设备进行控制的设备结构示意图；
图4为本发明实施例四提供的一种对用户设备进行控制的系统的结构示意图。
具体实施方式
为了实现本发明的目的，本发明实施例提供了一种对用户设备进行控制的方法、装置和系统，通过控制设备接收第一用户设备发送的在用户向所述第一设备中显示的第二用户设备发出操作指令时采集到的图像信息，并根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令，将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令，这样，对于显示在第一用户设备中的第二用户设备，控制设备利用用户针对第一用户设备做出的操作指令的图像信息，确定用于控制第二用户设备的控制指令，实现对第一用户设备中显示的第二用户设备的控制操作，使得在一个用户设备中利用“画中画”技术实现多屏互动下的控制，提高了多屏互动中显示资源的利用率。
需要说明的是，本发明的实施例应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中。
其中，第一用户设备为能够用于显示的设备，例如：电视机、电脑显示器、投影仪等，同时该显示设备上可以内置或者外置摄像头，采集用户针对第一用户设备所做出的操作指令的图像信息。
第二用户设备可以为移动终端设备，例如：智能手机设备、平板电脑设备、PC电脑设备等。
控制设备可以通过HDMI线与第一用户设备连接，通过WiFi与第二用户设备之间建立数据传输；还可以其他的数据传输方式，例如：硬件方式、软件方式（如：支持无限多媒体传输协议的应用客户端等）。
需要说明的是，本发明实施例中使用的控制设备可以是支持无限多媒体协议的智能机顶盒设备，既具有普通机顶盒的播放直播/点播电视节目的功能，还能够同时与移动终端设备之间使用WiFi连接，实现多个设备之间的多屏互动功能，这里不做具体限定。
下面结合说明书附图对本发明各个实施例进行详细描述。
实施例一：
如图1所示，为本发明实施例一提供的一种对用户设备进行控制的方法的流程示意图。所述方法可以如下所述。
步骤101：控制设备接收第一用户设备发送的图像信息。
其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的。
在步骤101中，由于第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接，控制设备获取用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中。
其中，所述第二用户设备显示在第一用户设备中的指定位置。
所述状态信息包括但不限于已连接状态信息和已响应状态信息。
所述已连接状态信息是指第一用户设备和第二用户设备已通过控制设备建立连接。
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中，包括：
所述控制设备获取已连接状态下的所述第二用户设备的图像信息，并将所述已连接状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
也就是说，在第一用户设备的显示区域中能够查看到第二用户设备。
所述已连接状态信息是指第二用户在响应了控制设备的控制指令后的状态。
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中，包括：
所述控制设备获取已响应状态下的所述第二用户设备的图像信息，并将所述已响应状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
例如：已响应状态是接通电话状态，那么在第一用户设备的显示区域就能看到第二用户设备接通电话状态的图像信息。
通常，第二用户设备在第一用户设备中的显示位置可以由用户自身调整，不限定在固定位置，但是为了保证不影响第一用户设备中多媒体资料的显示，因此，所述指定位置满足：用于显示所述第二用户设备的状态信息的区域小于所述第一用户设备的显示区域。也就是说，用于显示第二用户设备的区域小于所述第一用户设备的显示区域。例如：将第二用户设备显示在第一用户设备的显示区域的右下角。
可选地，在第一用户设备中用于显示第二用户设备的区域中设置两个操作按钮：第一个按钮用于将该区域中的第二用户设备全屏或者最小化显示，第二个按钮用于将该区域中的第二用户设备还原显示。
当控制设备接收到第一操作指示（即用户触发第一个按钮）时，控制设备发送控制指令给第一用户设备，使得第一用户设备中显示的第二用户设备实现全屏或者最小化显示；当控制设备接收到第二操作指示（即用户触发第二个按钮）时，控制设备发送控制指令给第二用户设备，使得第一用户设备中显示的第二用户设备实现还原显示。
需要说明的是，用户一旦发现第一用户设备中显示的第二用户设备的状态发生变化，即可向所述第一用户设备中显示的第二用户设备发出操作指令，此时图像采集设备将用户发出操作指令的图像信息进行采集。
第一用户设备在得到该图像信息之后，对得到的图像信息进行编码，组成数据包发送给控制设备。
也就是说，用户发出操作指令的方式可以是通过手势，还可以是通过声音，这里不做限定。
步骤102：所述控制设备根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令。
在步骤102中，所述控制设备接收到第一用户设备发送的数据包，按照设定的解码方式对该数据包进行解码，并得到解码后的图像信息。
所述控制设备根据预先存储的图像信息与控制指令之间的对应关系，确定接收到的所述图像信息对应的控制指令。
需要说明的是，图像信息与控制指令之间的对应关系可以是预先设置的，也可以是用户根据自身需要设置的并存储在控制设备中，这里不做限定。
例如：手势：双手合并对应控制指令：接通呼叫；手势：双手合并变为双手分开对应控制指令：断开呼叫等。
步骤103：所述控制设备将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令。
在步骤103中，所述控制设备将确定的所述控制指令进行编码压缩处理，以WiMo多媒体消息的形式发送给所述第二用户设备。
其中，所述WiMo多媒体消息中包含了所述控制指令对应的操作码。
所谓WiMo多媒体消息格式为：目标地址+源地址+其他类型（2字节）+UDP目标端口+WiMo消息内容，其中，目标地址（即Destination Addresss，占6个字节），用于指示第一用户设备的MAC地址；源地址（即Source Address，占6字节），用于指示第二用户设备的MAC地址；其他类型（即Ether Type），在以太网数据帧中，Ether Type为标准IP（0X0800）；UDP目标端口（占2个字节），在以太网数据帧中，UDP目标端口设为48689；WiMo消息，在以太网数据帧中，包含了占4个字节的Signature、占2个字节的Product ID、占1个字节的Version、占2个字节的Codes、占2个字节的Sequence ID、占2个字节的Command Type、占2个字节的OPCode、占2个字节的Length、占N个字节的Date以及占4个字节的CRC。
在本发明实施例中，在现有WiMo多媒体消息中增加了占两个字节的操作码：一个是操作第一用户设备的Local Code；另一个是操作第二用户设备的Remote Code。
在第二用户设备接收到所述控制设备发送的WiMo多媒体消息之后，所述第二用户对接收到的所述WiMo多媒体消息进行解压缩，读取所述WiMo多媒体消息中的操作码，并根据所述操作码响应所述用户发出的操作指令。
通过本发明实施例一的方案，控制设备接收第一用户设备发送的在用户向所述第一设备中显示的第二用户设备发出操作指令时采集到的图像信息，并根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令，将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令，这样，对于显示在第一用户设备中的第二用户设备，控制设备利用用户针对第一用户设备做出的操作指令的图像信息，确定用于控制第二用户设备的控制指令，实现对第一用户设备中显示的第二用户设备的控制操作，使得在一个用户设备中利用“画中画”技术实现多屏互动下的控制，提高了多屏互动中显示资源的利用率。
实施例二：
如图2所示，为本发明实施例二提供的一种对用户设备进行控制的方法的流程示意图。本发明实施例二是对本发明实施例的各个步骤的详细描述，本发明实施例二以通过第一用户设备的显示区域确定第二用户设备当前存在一个呼叫为例进行说明。所述方法可以如下所述。
步骤201：用户在通过第一用户设备观看显示的多媒体信息，此时确定在第一用户设备中显示的第二用户设备当前存在一个呼叫，此时触发将第二用户设备的显示区域进行全屏显示。
步骤202：第一用户设备外置或者内置的图像采集设备采集到用户向全屏显示中的第二用户设备发出接通该呼叫的手势时的图像信息，并将采集到的图像信息进行编码生成数据包，发送给控制设备。
步骤203：控制设备接收到该数据包后，对该数据包进行解压缩，读取该数据包中的图像信息。
可选地，若控制设备是智能机顶盒设备时，控制设备接收到该数据包后，可以直接发送给第二用户设备。
步骤204：控制设备根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令。
可选地，若第二用户设备直接接收到包含了图像信息的压缩数据包，则对该数据包进行解压缩，读取该数据包中的图像信息，并根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令，并响应确定所述控制指令。
步骤205：将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令。
步骤206：用户通过第一用户设备与呼叫第二用户设备的对端直接进行通话。
可选地，用户在通话结束后，发出断开呼叫的手势，按照上述方式，第二用户设备响应断开呼叫，用户继续查看第一用户设备中显示的多媒体资料。
实施例三：
如图3所示，为本发明实施例三提供的一种对用户设备进行控制的控制设备的结构示意图。本发明实施例三是与本发明实施例一～本发明实施例二在同一发明构思下的发明，所述控制设备包括：接收模块11、确定模块12和控制模块13，其中：
接收模块11，用于接收第一用户设备发送的图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的。
确定模块12，用于根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令。
控制模块13，用于将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令。
所述控制模块13，具体用于将确定的所述控制指令进行编码压缩处理，以WiMo多媒体消息的形式发送给所述第二用户设备，其中，所述WiMo多媒体消息中包含了所述控制指令对应的操作码。
可选地，所述控制设备还包括：获取模块14，其中：
所述获取模块14，用于获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中；
其中，所述第二用户设备显示在第一用户设备中的指定位置。
所述状态信息为已连接状态信息。
所述获取模块14，具体用于获取已连接状态下的所述第二用户设备的图像信息，并将所述已连接状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
所述状态信息为已响应状态信息。
所述获取模块14，具体用于获取已响应状态下的所述第二用户设备的图像信息，并将所述已响应状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
需要说明的是，本发明实施例应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中。
本发明实施例三所述的控制设备可以是智能机顶盒设备中的逻辑部件，也可以是物理实体单元；还可以是第二用户设备中的控制单元，既可以通过硬件实现，也可以通过软件实现（例如：应用客户端形式）等。
实施例四：
如图4所示，为本发明实施例四提供的一种对用户设备进行控制的系统结构示意图。本发明实施例四是与本发明实施例一～本发明实施例二在同一发明构思下的发明，所述系统包括：第一用户设备21、控制设备22和第二用户设备23，其中：
第一用户设备21，用于向控制设备发送图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的。
控制设备22，用于接收第一用户设备发送的图像信息，根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令；并将确定的所述控制指令发送给所述第二用户设备。
第二用户设备23，用于根据接收到的所述控制指令响应所述用户发出的操作指令。
具体地，所述控制设备22，具体用于将确定的所述控制指令进行编码压缩处理，以WiMo多媒体消息的形式发送给所述第二用户设备，其中，所述WiMo多媒体消息中包含了所述控制指令对应的操作码。
所述控制设备22，具体用于获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中；
其中，所述第二用户设备显示在第一用户设备中的指定位置。
所述状态信息为已连接状态信息；
所述控制设备22，具体用于获取已连接状态下的所述第二用户设备的图像信息，并将所述已连接状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
所述状态信息为已响应状态信息；
所述控制设备22，具体用于获取已响应状态下的所述第二用户设备的图像信息，并将所述已响应状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
需要说明的是，本发明实施例所述的系统应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中。
本领域的技术人员应明白，本发明的实施例可提供为方法、装置（设备）、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、装置（设备）和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (11)

1.一种对用户设备进行控制的方法，其特征在于，应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中，包括：
控制设备接收第一用户设备发送的图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的；
所述控制设备根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令；并
将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令；
其中，所述方法还包括：
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中；
其中，所述第二用户设备显示在第一用户设备中的指定位置。
2.如权利要求1所述的方法，其特征在于，将确定的所述控制指令发送给所述第二用户设备，包括：
所述控制设备将确定的所述控制指令进行编码压缩处理，以WiMo多媒体消息的形式发送给所述第二用户设备，其中，所述WiMo多媒体消息中包含了所述控制指令对应的操作码。
3.如权利要求2所述的方法，其特征在于，所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令，包括：
在第二用户设备接收到所述控制设备发送的WiMo多媒体消息之后，所述第二用户对接收到的所述WiMo多媒体消息进行解压缩，读取所述WiMo多媒体消息中的操作码，并根据所述操作码响应所述用户发出的操作指令。
4.如权利要求1所述的方法，其特征在于，所述状态信息为已连接状态信息；
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中，包括：
所述控制设备获取已连接状态下的所述第二用户设备的图像信息，并将所述已连接状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
5.如权利要求1所述的方法，其特征在于，所述状态信息为已响应状态信息；
控制设备获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中，包括：
所述控制设备获取已响应状态下的所述第二用户设备的图像信息，并将所述已响应状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
6.如权利要求1所述的方法，其特征在于，所述指定位置满足：用于显示所述第二用户设备的状态信息的区域小于所述第一用户设备的显示区域。
7.一种对用户设备进行控制的控制装置，其特征在于，应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中，包括：
接收模块，用于接收第一用户设备发送的图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的；
确定模块，用于根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令；
控制模块，用于将确定的所述控制指令发送给所述第二用户设备，以便于所述第二用户设备根据接收到的所述控制指令响应所述用户发出的操作指令；
其中，所述控制装置还包括：获取模块，其中：
所述获取模块，用于获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中；
其中，所述第二用户设备显示在第一用户设备中的指定位置。
8.如权利要求7所述的控制装置，其特征在于，
所述控制模块，具体用于将确定的所述控制指令进行编码压缩处理，以WiMo多媒体消息的形式发送给所述第二用户设备，其中，所述WiMo多媒体消息中包含了所述控制指令对应的操作码。
9.如权利要求7所述的控制装置，其特征在于，所述状态信息为已连接状态信息；
所述获取模块，具体用于获取已连接状态下的所述第二用户设备的图像信息，并将所述已连接状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
10.如权利要求7所述的控制装置，其特征在于，所述状态信息为已响应状态信息；
所述获取模块，具体用于获取已响应状态下的所述第二用户设备的图像信息，并将所述已响应状态下的第二用户设备的图像信息发送给所述第一用户设备，使得所述第二用户设备的图像信息显示在第一用户设备中。
11.一种对用户设备进行控制的系统，其特征在于，应用在第一用户设备通过有线和/或无线方式与控制设备连接，以及第二用户设备通过无线和/或有线方式与控制设备连接的场景中，包括：
第一用户设备，用于向控制设备发送图像信息，其中，所述图像信息是图像采集设备在用户向所述第一用户设备中显示的第二用户设备发出操作指令时采集得到的；
控制设备，用于接收第一用户设备发送的图像信息，根据预先存储的图像信息与控制指令之间的对应关系，确定接收到所述图像信息对应的控制指令；并将确定的所述控制指令发送给所述第二用户设备；
第二用户设备，用于根据接收到的所述控制指令响应所述用户发出的操作指令；
其中，所述控制设备，具体用于获取第二用户设备的状态信息，并将所述状态信息发送给第一用户设备，使得第二用户设备显示在第一用户设备中；其中，所述第二用户设备显示在第一用户设备中的指定位置。
CN201310481699.3A 2013-10-15 2013-10-15 一种对用户设备进行控制的方法、装置和系统 Active CN104580289B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310481699.3A CN104580289B (zh) 2013-10-15 2013-10-15 一种对用户设备进行控制的方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310481699.3A CN104580289B (zh) 2013-10-15 2013-10-15 一种对用户设备进行控制的方法、装置和系统

Publications (2)

Publication Number Publication Date
CN104580289A CN104580289A (zh) 2015-04-29
CN104580289B true CN104580289B (zh) 2018-03-23

Family

ID=53095468

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310481699.3A Active CN104580289B (zh) 2013-10-15 2013-10-15 一种对用户设备进行控制的方法、装置和系统

Country Status (1)

Country Link
CN (1) CN104580289B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105611362B (zh) * 2016-02-18 2018-12-07 四川长虹电器股份有限公司 通过智能终端控制机顶盒的方法
CN108108105B (zh) * 2017-12-18 2021-09-14 联想(北京)有限公司 一种信息处理设备及信息处理方法
CN111580769B (zh) * 2020-05-11 2023-10-24 西安万像电子科技有限公司 显示控制系统、方法、装置、存储介质及处理器
CN113742003B (zh) * 2021-09-15 2023-08-22 深圳市朗强科技有限公司 一种基于fpga芯片的程序代码执行方法及设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103002335A (zh) * 2011-09-14 2013-03-27 中国移动通信集团公司 一种实现无线画中画功能的方法、系统和设备
CN103051972A (zh) * 2012-12-21 2013-04-17 康佳集团股份有限公司 一种通过智能电视提示手机来电的控制方法及系统
CN103051796A (zh) * 2012-12-20 2013-04-17 康佳集团股份有限公司 一种智能终端与手机的交互方法及系统
CN103135748A (zh) * 2011-11-28 2013-06-05 深圳市腾讯计算机系统有限公司 人机交互操作指令的触发控制方法和系统
CN203070208U (zh) * 2012-12-04 2013-07-17 冯时 多屏互动系统
CN103297834A (zh) * 2013-05-21 2013-09-11 华为软件技术有限公司 一种机顶盒的控制方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103002335A (zh) * 2011-09-14 2013-03-27 中国移动通信集团公司 一种实现无线画中画功能的方法、系统和设备
CN103135748A (zh) * 2011-11-28 2013-06-05 深圳市腾讯计算机系统有限公司 人机交互操作指令的触发控制方法和系统
CN203070208U (zh) * 2012-12-04 2013-07-17 冯时 多屏互动系统
CN103051796A (zh) * 2012-12-20 2013-04-17 康佳集团股份有限公司 一种智能终端与手机的交互方法及系统
CN103051972A (zh) * 2012-12-21 2013-04-17 康佳集团股份有限公司 一种通过智能电视提示手机来电的控制方法及系统
CN103297834A (zh) * 2013-05-21 2013-09-11 华为软件技术有限公司 一种机顶盒的控制方法及装置

Also Published As

Publication number Publication date
CN104580289A (zh) 2015-04-29

Similar Documents

Publication Publication Date Title
US10911498B2 (en) User input back channel for wireless displays
CN104581405B (zh) 一种显示内容处理方法及设备
CN102111674B (zh) 一种移动终端播放在线视频的系统、方法及移动终端
US9413803B2 (en) User input back channel for wireless displays
TWI517689B (zh) 多重畫面切換方法及其系統
US10135900B2 (en) User input back channel for wireless displays
WO2013125829A1 (en) Screen mirroring method and apparatus thereof
WO2022111672A1 (zh) 数据处理方法、装置及电子设备
US20130009996A1 (en) User input back channel for wireless displays
US10171815B2 (en) Coding manner switching method, transmit end, and receive end
CN101778285B (zh) 一种音视频信号无线传输系统及其方法
CN104580289B (zh) 一种对用户设备进行控制的方法、装置和系统
CN104954812A (zh) 一种视频同步播放的方法、装置及系统
JP2014513903A (ja) ネットワーキング方法、サーバ装置およびクライアント装置
WO2022111421A1 (zh) 应用界面投屏方法、装置、设备以及存储介质
CN114610253A (zh) 一种投屏方法及设备
CN112423076A (zh) 一种音频投屏同步控制方法、设备及计算机可读存储介质
CN103561311A (zh) 传屏方法和电视机
US20110320571A1 (en) Apparatus and method for live streaming between mobile communication terminals
CN112203126B (zh) 投屏方法、投屏装置及存储介质
CN110727485A (zh) 一种屏幕界面可选择性共享方法及系统
CN102685599B (zh) 电视节目互动系统及方法
CN108307227A (zh) 一种实现智能终端及投影设备同屏显示的方法及装置
CN105872673A (zh) 多媒体数据显示方法及装置
CN114554277B (zh) 多媒体的处理方法、装置、服务器及计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant