CN106341606A - 一种设备控制方法及移动终端 - Google Patents
一种设备控制方法及移动终端 Download PDFInfo
- Publication number
- CN106341606A CN106341606A CN201610872018.XA CN201610872018A CN106341606A CN 106341606 A CN106341606 A CN 106341606A CN 201610872018 A CN201610872018 A CN 201610872018A CN 106341606 A CN106341606 A CN 106341606A
- Authority
- CN
- China
- Prior art keywords
- equipment
- target device
- viewing area
- mobile terminal
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000004891 communication Methods 0.000 claims abstract description 83
- 230000001360 synchronised effect Effects 0.000 claims description 6
- 230000006870 function Effects 0.000 description 41
- 238000004378 air conditioning Methods 0.000 description 12
- 230000004044 response Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 238000005192 partition Methods 0.000 description 7
- 230000003190 augmentative effect Effects 0.000 description 6
- 230000006399 behavior Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 230000005611 electricity Effects 0.000 description 4
- 230000006855 networking Effects 0.000 description 4
- 230000000712 assembly Effects 0.000 description 3
- 238000000429 assembly Methods 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000012141 concentrate Substances 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000009730 ganji Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000002463 transducing effect Effects 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
- G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C23/00—Non-electrical signal transmission systems, e.g. optical systems
- G08C23/04—Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mobile Radio Communication Systems (AREA)
- Telephone Function (AREA)
Abstract
本发明公开了一种设备控制方法及移动终端，所述方法包括：通过图像采集模块采集包含有至少一个设备的图像，在显示区域中呈现包含有至少一个设备的画面；基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式，基于所述通信方式将所述操作指令发送至所述第一目标设备。
Description
技术领域
本发明涉及通信领域中的多终端管理技术，尤其涉及一种设备控制方法及移动终端。
背景技术
当前技术中，当对多台设备进行控制时，只能采用其设备对应的遥控器，或者使用移动终端通过红外的方式与各台设备对应的遥控器同步后模拟遥控器进行控制，操作方式较为复杂和单一。而移动端的遥控功能在与遥控器进行同步后，可能控制很多设备，但是只能提供开关和上下左右的选择，可见现有技术中无法为用户提供更加丰富的多设备交互场景。
发明内容
本发明的主要目的在于提出一种设备控制方法及移动终端，旨在解决现有技术中存在的上述问题。
为实现上述目的，
本发明提供的一种设备控制方法，应用于移动终端，包括：
通过图像采集模块采集包含有至少一个设备的图像，在显示区域中呈现包含有至少一个设备的画面；
基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；
基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式，基于所述通信方式将所述操作指令发送至所述第一目标设备；其中，所述控制界面位于对应的设备在显示区域中的显示位置处、且至少用于提供针对设备的输出信息或设备的操作参数进行控制的界面。
本发明提供了一种移动终端，包括：
图像采集模块，用于采集包含有至少一个设备的图像；
显示模块，用于在显示区域中呈现包含有至少一个设备的画面；
处理模块，用于基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式；其中，所述控制界面位于对应的设备在显示区域中的显示位置处、且至少用于提供针对设备的输出信息或设备的操作参数进行控制的界面；
通信模块，用于基于所述通信方式将所述操作指令发送至所述第一目标设备。
本发明提出的设备控制方法及移动终端，由移动终端侧获取到流媒体信息，通过输出流媒体信息使得移动终端与设备输出的信息达成同步，在移动终端中通过针对流媒体信息生成操作指令，来控制设备侧的输出信息。如此，就能够达到更加直观的针对设备输出的信息进行控制，为用户提供了更加丰富的交互场景，并且提升控制的准确度。
附图说明
图1为实现本发明各个实施例的移动终端的硬件结构示意图；
图2为如图1所示的移动终端的无线通信系统示意图；
图3为本发明实施例设备控制方法流程示意图一；
图4为本发明实施例获取信息的场景示意图一；
图5为本发明实施例获取信息的场景示意图二；
图6a为本发明实施例获取信息的场景示意图三；
图6b为本发明实施例获取信息的场景示意图四；
图7为本发明实施例获取信息的场景示意图五；
图8为本发明实施例信息输出方法流程示意图二；
图9为本发明实施例移动终端组成结构示意图一；
图10为本发明实施例移动终端组成结构示意图二；
图11为本发明实施例第一类设备组成结构示意图；
图12为本发明实施例第二类设备组成结构示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身并没有特定的意义。因此，"模块"与"部件"可以混合地使用。
移动终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面，假设终端是移动终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端。
图1为实现本发明各个实施例的移动终端的硬件结构示意。
移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端，但是应理解的是，并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。
无线通信单元110通常包括一个或多个组件，其允许移动终端100与无线通信系统或网络之间的无线电通信。
A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121，相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元151上。经相机121处理后的图像帧可以存储在存储器160(或其它存储介质)中或者经由无线通信单元110进行发送。
用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息，并且可以包括键盘、锅仔片、触摸板(例如，检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地，当触摸板以层的形式叠加在显示单元151上时，可以形成触摸屏。
接口单元170用作至少一个外部装置与移动终端100连接可以通过的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外，具有识别模块的装置(下面称为"识别装置")可以采取智能卡的形式，因此，识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元170可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。
另外，当移动终端100与外部底座连接时，接口单元170可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如，音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151、音频输出模块152、警报单元153等等。
显示单元151可以显示在移动终端100中处理的信息。例如，当移动终端100处于电话通话模式时，显示单元151可以显示与通话或其它通信(例如，文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时，显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。
同时，当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时，显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看，这可以称为透明显示器，典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式，移动终端100可以包括两个或更多显示单元(或其它显示装置)，例如，移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。
音频输出模块152可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时，将无线通信单元110接收的或者在存储器160中存储的音频数据转换音频信号并且输出为声音。而且，音频输出模块152可以提供与移动终端100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出模块152可以包括扬声器、蜂鸣器等等。
警报单元153可以提供输出以将事件的发生通知给移动终端100。典型的事件可以包括呼叫接收、消息接收、键信号输入、触摸输入等等。除了音频或视频输出之外，警报单元153可以以不同的方式提供输出以通知事件的发生。例如，警报单元153可以以振动的形式提供输出，当接收到呼叫、消息或一些其它进入通信(incomingcommunication)时，警报单元153可以提供触觉输出(即，振动)以将其通知给用户。通过提供这样的触觉输出，即使在用户的移动电话处于用户的口袋中时，用户也能够识别出各种事件的发生。警报单元153也可以经由显示单元151或音频输出模块152提供通知事件的发生的输出。
存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等，或者可以暂时地存储己经输出或将要输出的数据(例如，电话簿、消息、静态图像、视频等等)。而且，存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。
存储器160可以包括至少一种类型的存储介质，所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且，移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。
控制器180通常控制移动终端的总体操作。例如，控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外，控制器180可以包括用于再现(或回放)多媒体数据的多媒体模块1810，多媒体模块1810可以构造在控制器180内，或者可以构造为与控制器180分离。控制器180可以执行模式识别处理，以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。
电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。
这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施，这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施，在一些情况下，这样的实施方式可以在控制器180中实施。对于软件实施，诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施，软件代码可以存储在存储器160中并且由控制器180执行。
至此，己经按照其功能描述了移动终端。下面，为了简要起见，将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此，本发明能够应用于任何类型的移动终端，并且不限于滑动型移动终端。
如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信系统以及基于卫星的通信系统来操作。
现在将参考图2描述其中根据本发明的移动终端能够操作的通信系统。
这样的通信系统可以使用不同的空中接口和/或物理层。例如，由通信系统使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信系统(UMTS)(特别地，长期演进(LTE))、全球移动通信系统(GSM)等等。作为非限制性示例，下面的描述涉及CDMA通信系统，但是这样的教导同样适用于其它类型的系统。
参考图2，CDMA无线通信系统可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干己知的接口中的任一种来构造，所述接口包括例如E1/T1、ATM，IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是，如图2中所示的系统可以包括多个BSC2750。在图2中，描绘了多个卫星300，但是理解的是，可以利用任何数目的卫星获得有用的定位信息。
基于上述移动终端硬件结构以及通信系统，提出本发明方法各个实施例。
实施例一、
本发明实施例提供了一种设备控制方法，应用于移动终端，如图3所示，所述方法包括：
步骤301：通过图像采集模块采集包含有至少一个设备的图像，在显示区域中呈现包含有至少一个设备的画面；
步骤302：基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；
步骤303：基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式，基于所述通信方式将所述操作指令发送至所述第一目标设备；其中，所述控制界面位于对应的设备在显示区域中的显示位置处、且至少用于提供针对设备的输出信息或设备的操作参数进行控制的界面。
这里，所述第一类设备为至少具备图像显示功能的终端设备，也就是说，第一类设备可以为电视、笔记本电脑、平板电脑等。移动终端可以为智能手机、还可以为平板电脑等，也就是说，移动终端可以为具备无线通信功能、图像采集功能的设备。
通过开启图像采集模块采集到包括有多个设备的图像，这多个设备中可以包括有除了第一类设备之外的其他类别的设备，比如，图4所示，移动终端采集到的图像中，包括有电视、空调；
所述基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别可以包括：根据包含有至少一个设备的图像，对每一个设备进行特征识别提取得到每一个设备对应的特征信息，基于所述特征信息确定每一个设备对应的设备类型；
其中，所述设备类型至少可以包括有：第一类设备为够建立无线通信连接、且具备图像显示功能的终端设备；第二类设备不具备图像显示功能的终端设备。
所述对每一个设备进行特征识别的方法，可以为，通过每一个设备对应的标识信息进行特征识别，比如，通过设备上贴的二维码进行特征识别，或者，可以通过设备的序列号来进行识别；
具体来说，参见图5，假设当前采集到的图像中，包含有电视、空调这两个设备，电视的下边框处有一个二维码1、另外空调的右侧也有一个二维码2，通过对图像进行分析，分别识别出来这两个二维码1和2；然后解析这两个二维码1和2分别得到设备对应的信息，比如，具体可以包括有设备的名称、设备的类型、设备的编号等等，这里不进行穷举。基于上述设备的名称、类型等信息，来确定设备为第一类设备还是第二类设备。具体的，可以根据手机处保存的多种设备以及多种设备类型结合编号等信息，所对应的设备的具体类别信息，或设备的具体信息，比如，包括有设备所具备的通信方式等可以预设在手机侧；还可以从网络侧获取到相应的设备类型或编号对应的通信方式。
可以看出，通过采用上述针对图像中的设备的标识信息的识别来确定采集到图像中的至少一个第一类设备、以及第二类设备。
这里需要进一步指出的是，一个设备可以即具备无线通信功能又支持红外信号，比如，图5中所示的空调，既能够通过红外模块接收遥控器的红外信号指令，也可以通过WIFI模块与手机建立连接，并通过手机接收到控制指令，那么针对这类设备，可以优选的建立无线通信，也就是说，将该设备划分至第一类设备中。
需要说明的是，在显示区域中呈现包含有所述至少一个第一类设备的画面可以为，显示区域中实时展示当前图像采集模块所对的区域的图像，也就是说，当前显示区域中并非输出一个固定不变的图片，而是基于移动终端或基于图像采集模块的位置变化而实时变化的画面；或者，可以理解为，当前仅采集某一个区域的画面，但是并不对采集到的画面进行截取。
与所述至少一个第一类设备建立第一通信连接，可以为通过无线通信功能，与所述至少一个第一类设备均建立第一通信连接；当前对应的画面中具备有电视、电脑以及空调，很明显电视、电脑为第一类设备，将移动终端通过无线通信功能分别与电视和电脑建立通信连接，而忽略与空调之间的关系。
本实施例提供的方案中，当与第一类设备建立连接关系之后，所述通过所述至少一个第一类设备中的目标设备的控制界面检测到对应的操作指令之前，所述方法还包括：
在显示区域中呈现包含有所述至少一个第一类设备的画面，并且在所述显示区域中呈现每一个所述第一类设备对应的控制界面。
上述控制界面可以为基于第一类设备的具体信息生成或者从网络侧获取到的控制界面；第一类设备的具体信息可以用于描述第一类设备的名称、型号等等，比如，XX品牌的电视；相应的，基于具体信息生成的控制界面，可以为基于第一类设备的型号生成针对该设备的由至少一个控制信息组成的控制界面。
参见图6a，图中可以看出当前的界面中显示有电视1和风扇2，针对电视除了显示当前实时画面之外，在电视1和风扇2对应的显示位置处，分别还可以提供至少一个控制信息的虚拟按键组成的控制界面，如图所示，以电视1为例包括有下一个、快进、前一个、暂停，风扇2的显示区域处可以有转速、以及开关等控制信息的虚拟按键。
可见，通过采用上述方案，就能够同时采集并呈现包括有多个第一类设备的画面，与多个第一类设备建立连接之后，通过目标设备对应的操作界面检测到操作指令，发送该操作指令至目标设备。如此，就能够从多个第一类设备中灵活的选取目标设备，仅通过视图就获取到针对目标设备的操作界面，实现了灵活并且快捷的对第一类设备进行控制，丰富了设备的交互场景。
实施例二、
本发明实施例提供了一种设备控制方法，应用于移动终端，如图3所示，所述方法包括：
步骤301：通过图像采集模块采集包含有至少一个设备的图像，在显示区域中呈现包含有至少一个设备的画面；
步骤302：基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；
步骤303：基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式，基于所述通信方式将所述操作指令发送至所述第一目标设备；其中，所述控制界面位于对应的设备在显示区域中的显示位置处、且至少用于提供针对设备的输出信息或设备的操作参数进行控制的界面。
这里，所述第一类设备为至少具备图像显示功能的终端设备，也就是说，第一类设备可以为电视、笔记本电脑、平板电脑等。移动终端可以为智能手机、还可以为平板电脑等，也就是说，移动终端可以为具备无线通信功能、图像采集功能的设备。
与实施例一不同在于，本实施例提供的方案中，所述通过所述至少一个第一类设备中的第一目标设备的控制界面检测到对应的操作指令，所述方法还包括：
检测到针对所述至少一个第一类设备中的第一目标设备的选定操作时，展示针对所述目标设备的控制界面；
通过所述第一目标设备的控制界面，检测到针对所述第一目标设备的操作指令。
也就是说，在移动终端的显示区域中并不是实时提供针对每一个第一类设备的操控界面，而仅在确定要对第一目标设备进行操作的时候，再提供该目标设备的控制界面，如此，可以避免由于移动终端的显示区域的尺寸较小的时候，无法提供较大的展示空间的问题。
上述选定操作可以为，检测到用户点击所述第一目标设备所在的显示位置时，确定选定第一目标设备。另外，选定操作的手势可以根据实际情况进行设置，比如，可以为圈中第一目标设备的时候为选定操作，本实施例不再进行穷举。
上述控制界面可以为基于第一类设备的具体信息生成或者从网络侧获取到的控制界面；第一类设备的具体信息可以用于描述第一类设备的名称、型号等等，比如，XX品牌的电视；相应的，基于具体信息生成的控制界面，可以为基于第一类设备的型号生成针对该设备的由至少一个控制信息组成的控制界面。
所述基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别之后，所述方法还包括：
当确定设备为第一类设备时，通过无线通信功能与所述设备建立无线通信连接；当确定设备为第二类设备时，从网络侧获取到所述设备对应的红外指令集，所述红外指令集中包括有至少一个针对设备的红外指令；
具体来说，当确定设备为第一类设备的时候，就开启WIFI功能与第一类设备建立连接；若为第二类设备的时候，就从网络侧下载对应的红外指令集。比如，参见图6b，环境中存在两个电视1和2，一个风扇和一个空调，其中，电视为第一类设备，那么移动终端此时通过WIFI与电视1和2组网；另外，通过红外控制风扇和空调。
相应的，基于所述第一目标设备的设备类别确定对应的通信方式，基于所述通信方式将所述操作指令发送至所述第一目标设备，包括：
当所述第一目标设备为第一类设备时，通过无线通信连接将所述操作指令发送至第一目标设备；
当所述第一目标设备为第二类设备时，基于所述操作指令确定对应的红外指令，将所述红外指令发送至第一目标设备。
具体来说，当设备为第二类设备的时候，可以根据用户点击的控制界面上的虚拟按键，来确定对应的操作指令；进一步地，将操作指令以及红外指令集确定对应的红外指令，通过红外模块将该红外指令发送至第一目标设备。
所述方法还包括：
检测到针对所述至少一个第一类设备中的第二目标设备的屏幕投影指令时，判断所述第二目标设备是否具备用于输出图像的显示区域；
若所述第二目标设备具备用于输出图像的显示区域时，向所述第二目标设备发送获取屏幕数据的请求；
接收到所述第二目标设备基于所述获取屏幕数据的请求发来的流媒体信息，控制在显示区域中由呈现包含有所述至少一个第一类设备的画面切换为输出所述流媒体信息；其中，所述流媒体信息与所述第二目标设备输出的信息保持同步。
其中，判断所述第二目标设备是否具备用于输出图像的显示区域可以为根据获取到的第二目标设备的类型、名称或编号的详细信息，确定第二目标设备是否为能够输出图像的设备，或者，可以从网络侧获取该第二目标设备详细信息，也就是从网络侧得知是否第二目标设备是否能够输出图像。
所述屏幕投影指令可以为根据提供的菜单选项进行选取，或者，可以为根据显示在界面上的某一个虚拟按键来触发，或者，还可以通指定的至少一个物理按键来触发，这里不进行穷举。
上述第二目标设备输出的信息，可以为其显示屏输出的任何内容，比如，参见图7，在电视的显示屏中正在输出一个视频，图中示出的为这个视频中的某一帧画面，通过终端设备提供的这个交互界面可以为用户提供可选择的节目类型等。
上述流媒体信息可以为由第二目标设备当前输出的视频信息的画面组成的流媒体信息，关于基于终端设备根据其输出的视频信息确定流媒体信息的方式，本实施例中不进行限定。但是，需要理解到的是，通过接收到终端设备发来的流媒体信息，并播放当前流媒体信息对应的画面，使得移动终端输出的画面与终端设备相同，以使得两者保持输出的画面至少保持同步。
本实施例中详细说明如何获取到操作指令，具体如下：
所述检测到针对在所述显示区域中输出的所述流媒体信息的操作指令，包括以下两种处理方式中至少之一：
处理方式一、
在所述显示区域中还展示针对终端设备输出的信息的控制操作界面，其中，所述控制操作界面中至少包括有针对所述信息的播放进度的至少一个控制按键、以及针对所述终端设备的至少一种控制按键；检测到针对所述控制操作界面的目标控制按键的操作时，基于所述目标控制按键对应的功能生成操作指令。
处理方式二、
检测到位于所述显示区域中的至少一种操作手势；基于所述至少一种操作手势确定针对所述终端设备输出的信息的操作指令。
与处理方式一的不同之处在于，本处理方式中可以不基于操作控制界面提供的几种控制按键生成控制指令，而是检测处于显示区域中的至少一种操作手势，进而基于预设的操作手势与操作指令对应表来确定检测到的操作手势所对应的操作指令，如此，得到针对终端设备输出的信息的操作指令。
在上述介绍的场景之上，本实施例还提供进一步的处理说明，就是根据用户的操作，可以退出上述全屏的投影处理，重新返回至针对多个第一类设备进行交互的场景中。
也就是通过采用上述方案，能够采用手机拍摄显示设备，获取显示设备的信息,完成配对连接，用户能够在手机取景框中以AR(Augmented Reality，增强现实)的形式直接对其他设备进行控制,并且用户可选的使用屏幕投影的方式获取对方屏幕数据,使用更直观的方式进行控制，丰富操作方式，提高可玩性，提升用户体验。
具体可以参见图8提供一个实施的示例：
用户打开手机侧的摄像头，并通过取景框对想要控制的设备进行取景，用户通过界面确定取景内容后，开始进行图像识别；
通过对显示设备的边框提供的特殊标志或者二维码等形式识别获取设备信息，根据所识别的设备若是为非显示设备则自动从远程库上下载对应设备的指令集；若为显示设备则自动完成wifi direct的连接；
对显示设备连接完成后，在底层完成屏幕分区识别，根据用户操作所在的区域确定用户所控制的显示设备；
若控制的设备为非显示设备，则选取对应的红外指令进行发送，非显示设备收到红外指令后进行响应；
若控制的设备为显示设备，用户在取景框中对显示设备进行划屏、点击等操作；指令发送模块根据用户操作的设备进行发送，显示设备接收到指令后进行响应；
在连接完成后，用户选择使用屏幕投影控制某一设备，手机关闭屏幕分区识别功能，手机向显示设备发起屏幕投影请求，显示设备发送屏幕数据，手机对接收到的数据进行解析，并进行显示；
用户退出屏幕投影模式后，重新使能屏幕分区识别功能，回到AR控制模式。
可见，通过采用上述方案，就能够同时采集并呈现包括有多个第一类设备的画面，与多个第一类设备建立连接之后，通过目标设备对应的操作界面检测到操作指令，发送该操作指令至目标设备。如此，就能够从多个第一类设备中灵活的选取目标设备，仅通过视图就获取到针对目标设备的操作界面，实现了灵活并且快捷的对第一类设备进行控制，丰富了设备的交互场景。
实施例三、
本发明实施例提供了一种移动终端，如图9所示，包括：
图像采集模块91，用于采集包含有至少一个设备的图像；
显示模块92，用于在显示区域中呈现包含有至少一个设备的画面；
处理模块93，用于基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式；其中，所述控制界面位于对应的设备在显示区域中的显示位置处、且至少用于提供针对设备的输出信息或设备的操作参数进行控制的界面；
通信模块94，用于基于所述通信方式将所述操作指令发送至所述第一目标设备。
这里，所述第一类设备为至少具备图像显示功能的终端设备，也就是说，第一类设备可以为电视、笔记本电脑、平板电脑等。移动终端可以为智能手机、还可以为平板电脑等，也就是说，移动终端可以为具备无线通信功能、图像采集功能的设备。
通过开启图像采集模块采集到包括有多个设备的图像，这多个设备中可以包括有除了第一类设备之外的其他类别的设备，比如，图4所示，移动终端采集到的图像中，包括有电视、空调；
所述基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别可以包括：根据包含有至少一个设备的图像，对每一个设备进行特征识别提取得到每一个设备对应的特征信息，基于所述特征信息确定每一个设备对应的设备类型；
其中，所述设备类型至少可以包括有：第一类设备为够建立无线通信连接、且具备图像显示功能的终端设备；第二类设备不具备图像显示功能的终端设备。
所述对每一个设备进行特征识别的方法，可以为，通过每一个设备对应的标识信息进行特征识别，比如，通过设备上贴的二维码进行特征识别，或者，可以通过设备的序列号来进行识别；
具体来说，参见图5，假设当前采集到的图像中，包含有电视、空调这两个设备，电视的下边框处有一个二维码1、另外空调的右侧也有一个二维码2，通过对图像进行分析，分别识别出来这两个二维码1和2；然后解析这两个二维码1和2分别得到设备对应的信息，比如，具体可以包括有设备的名称、设备的类型、设备的编号等等，这里不进行穷举。基于上述设备的名称、类型等信息，来确定设备为第一类设备还是第二类设备。具体的，可以根据手机处保存的多种设备以及多种设备类型结合编号等信息，所对应的设备的具体类别信息，或设备的具体信息，比如，包括有设备所具备的通信方式等可以预设在手机侧；还可以从网络侧获取到相应的设备类型或编号对应的通信方式。
可以看出，通过采用上述针对图像中的设备的标识信息的识别来确定采集到图像中的至少一个第一类设备、以及第二类设备。
这里需要进一步指出的是，一个设备可以即具备无线通信功能又支持红外信号。
需要说明的是，在显示区域中呈现包含有所述至少一个第一类设备的画面可以为，显示区域中实时展示当前图像采集模块所对的区域的图像，也就是说，当前显示区域中并非输出一个固定不变的图片，而是基于移动终端或基于图像采集模块的位置变化而实时变化的画面；或者，可以理解为，当前仅采集某一个区域的画面，但是并不对采集到的画面进行截取。
与所述至少一个第一类设备建立第一通信连接，可以为通过无线通信功能，与所述至少一个第一类设备均建立第一通信连接；当前对应的画面中具备有电视、电脑以及空调，很明显电视、电脑为第一类设备，将移动终端通过无线通信功能分别与电视和电脑建立通信连接，而忽略与空调之间的关系。
本实施例提供的方案中，所述处理模块，用于在显示区域中呈现包含有所述至少一个第一类设备的画面，并且在所述显示区域中呈现每一个所述第一类设备对应的控制界面。
上述控制界面可以为基于第一类设备的具体信息生成或者从网络侧获取到的控制界面；第一类设备的具体信息可以用于描述第一类设备的名称、型号等等，比如，XX品牌的电视；相应的，基于具体信息生成的控制界面，可以为基于第一类设备的型号生成针对该设备的由至少一个控制信息组成的控制界面。
可见，通过采用上述方案，就能够同时采集并呈现包括有多个第一类设备的画面，与多个第一类设备建立连接之后，通过目标设备对应的操作界面检测到操作指令，发送该操作指令至目标设备。如此，就能够从多个第一类设备中灵活的选取目标设备，仅通过视图就获取到针对目标设备的操作界面，实现了灵活并且快捷的对第一类设备进行控制，丰富了设备的交互场景。
实施例四、
与实施例三不同在于，本实施例提供的方案中，所述处理模块，用于检测到针对所述至少一个第一类设备中的第一目标设备的选定操作时，展示针对所述目标设备的控制界面；
通过所述第一目标设备的控制界面，检测到针对所述第一目标设备的操作指令。
也就是说，在移动终端的显示区域中并不是实时提供针对每一个第一类设备的操控界面，而仅在确定要对第一目标设备进行操作的时候，再提供该目标设备的控制界面，如此，可以避免由于移动终端的显示区域的尺寸较小的时候，无法提供较大的展示空间的问题。
上述选定操作可以为，检测到用户点击所述第一目标设备所在的显示位置时，确定选定第一目标设备。另外，选定操作的手势可以根据实际情况进行设置，比如，可以为圈中第一目标设备的时候为选定操作，本实施例不再进行穷举。
上述控制界面可以为基于第一类设备的具体信息生成或者从网络侧获取到的控制界面；第一类设备的具体信息可以用于描述第一类设备的名称、型号等等，比如，XX品牌的电视；相应的，基于具体信息生成的控制界面，可以为基于第一类设备的型号生成针对该设备的由至少一个控制信息组成的控制界面。
所述处理模块，用于当确定设备为第一类设备时，通过无线通信功能与所述设备建立无线通信连接；当确定设备为第二类设备时，从网络侧获取到所述设备对应的红外指令集，所述红外指令集中包括有至少一个针对设备的红外指令；
具体来说，当确定设备为第一类设备的时候，就开启WIFI功能与第一类设备建立连接；若为第二类设备的时候，就从网络侧下载对应的红外指令集。
相应的，所述处理模块，用于当所述第一目标设备为第一类设备时，通过无线通信连接将所述操作指令发送至第一目标设备；当所述第一目标设备为第二类设备时，基于所述操作指令确定对应的红外指令，将所述红外指令发送至第一目标设备。
具体来说，当设备为第二类设备的时候，可以根据用户点击的控制界面上的虚拟按键，来确定对应的操作指令；进一步地，将操作指令以及红外指令集确定对应的红外指令，通过红外模块将该红外指令发送至第一目标设备。
所述处理模块，用于检测到针对所述至少一个第一类设备中的第二目标设备的屏幕投影指令时，判断所述第二目标设备是否具备用于输出图像的显示区域；若所述第二目标设备具备用于输出图像的显示区域时，向所述第二目标设备发送获取屏幕数据的请求；
接收到所述第二目标设备基于所述获取屏幕数据的请求发来的流媒体信息，控制在显示区域中由呈现包含有所述至少一个第一类设备的画面切换为输出所述流媒体信息；其中，所述流媒体信息与所述第二目标设备输出的信息保持同步。
其中，判断所述第二目标设备是否具备用于输出图像的显示区域可以为根据获取到的第二目标设备的类型、名称或编号的详细信息，确定第二目标设备是否为能够输出图像的设备，或者，可以从网络侧获取该第二目标设备详细信息，也就是从网络侧得知是否第二目标设备是否能够输出图像。
所述屏幕投影指令可以为根据提供的菜单选项进行选取，或者，可以为根据显示在界面上的某一个虚拟按键来触发，或者，还可以通指定的至少一个物理按键来触发，这里不进行穷举。
上述第二目标设备输出的信息，可以为其显示屏输出的任何内容，比如，参见图7，在电视的显示屏中正在输出一个视频，图中示出的为这个视频中的某一帧画面，通过终端设备提供的这个交互界面可以为用户提供可选择的节目类型等。
上述流媒体信息可以为由第二目标设备当前输出的视频信息的画面组成的流媒体信息，关于基于终端设备根据其输出的视频信息确定流媒体信息的方式，本实施例中不进行限定。但是，需要理解到的是，通过接收到终端设备发来的流媒体信息，并播放当前流媒体信息对应的画面，使得移动终端输出的画面与终端设备相同，以使得两者保持输出的画面至少保持同步。
本实施例中详细说明如何获取到操作指令，具体如下：
所述检测到针对在所述显示区域中输出的所述流媒体信息的操作指令，包括以下两种处理方式中至少之一：
处理方式一、
在所述显示区域中还展示针对终端设备输出的信息的控制操作界面，其中，所述控制操作界面中至少包括有针对所述信息的播放进度的至少一个控制按键、以及针对所述终端设备的至少一种控制按键；检测到针对所述控制操作界面的目标控制按键的操作时，基于所述目标控制按键对应的功能生成操作指令。
处理方式二、
检测到位于所述显示区域中的至少一种操作手势；基于所述至少一种操作手势确定针对所述终端设备输出的信息的操作指令。
与处理方式一的不同之处在于，本处理方式中可以不基于操作控制界面提供的几种控制按键生成控制指令，而是检测处于显示区域中的至少一种操作手势，进而基于预设的操作手势与操作指令对应表来确定检测到的操作手势所对应的操作指令，如此，得到针对终端设备输出的信息的操作指令。
在上述介绍的场景之上，本实施例还提供进一步的处理说明，就是根据用户的操作，可以退出上述全屏的投影处理，重新返回至针对多个第一类设备进行交互的场景中。
也就是通过采用上述方案，能够采用手机拍摄显示设备，获取显示设备的信息,完成配对连接，用户能够在手机取景框中以AR(Augmented Reality，增强现实)的形式直接对其他设备进行控制,并且用户可选的使用屏幕投影的方式获取对方屏幕数据,使用更直观的方式进行控制，丰富操作方式，提高可玩性，提升用户体验。
本案通过采用手机拍摄显示设备，获取显示设备的信息,完成配对连接，用户能够在手机取景框中以AR(Augmented Reality，增强现实)的形式直接对其他设备进行控制，通过识别到的设备类型，自动选择使用连接的方式进行控制或者直接使用红外的方式进行控制，并且通过识别到的设备信息，直接到远程库去下载匹配的控制指令。该方案免去了需要和遥控器进行同步带来的不便，还可以兼容不同类型设备，根据设备的不同自动选择不同方式进行控制，给用户带来最佳的体验。
参见图10，提供了一种具体实施模块，该方案手机侧由8个模块组成，摄像头模块用于进行对端设备的取景，显示模块用于取景画面或者显示设备屏幕画面的显示；图像识别模块用于对摄像头捕捉到的图像中特殊标志，类似二维码等信息进行识别，获取显示设备的信息；设备类型识别模块根据所识别到的设备是显示设备或非显示设备，分别选择红外的方式或者wifidirect组网的方式进行控制；屏幕分区识别控制指令模块用于在屏幕上根据图像划分出区域，并根据用户的操作确定出用户所操作的区域并确定对应的设备；坐标转换模块是加入相机景深及所捕获物体的大小数据，将用户在手机屏幕上控制指令进行转换对应到显示设备的坐标；控制指令发送模块用于发送用户的控制指令；WIFI模块负责完成组网，以及维持底层链路；红外模块用于使用红外指令控制非显示设备；远程指令库模块提供用户对所控制的非显示设备对应指令的下载。
显示设备如图11所示，显示模块提供用户可操作的界面；设备类型标识模块标识自己的设备类型；控制指令接收模块用于接收控制指令并做出响应；wifi模块用于完成wifidirect组网。
非显示设备如图12所示，显示模块提供用户可操作的界面；设备类型标识模块标识自己的设备类型；控制指令接收模块用于接收控制指令并做出响应；红外模块用于接收红外命令。
手机在完成图像识别后，识别出设备的类型，若是设备为非显示设备，则根据设备的品牌和种类从远程库上下载对应的指令；若是设备为显示设备，则自动发起wifidirect连接，通过wifidirect进行控制。
在预览画面中同时存在多台设备时，识别设备之后，自动进行屏幕分区识别功能，并依此判定用户操作时控制的是哪台设备。对于显示设备，用户可开启屏幕投影模式，获取显示设备的屏幕进行控制，此时屏幕分区识别功能自动关闭，全屏显示对方的屏幕数据；当用户回到AR模式时，屏幕分区识别功能再次开启。
在用户在手机屏幕上操作时，通过识别到被操作的设备，继而选择对应的红外指令库进行控制或者传递屏幕事件进行控制。
所提显示设备指具有显示能力的设备，比如智能电视、盒子、电脑等；非显示设备指不具备显示能力的设备，比如空调、洗衣机、风扇等。
可见，通过采用上述方案，就能够由移动终端侧获取到流媒体信息，通过输出流媒体信息使得移动终端与终端设备输出的信息达成同步，在移动终端中通过针对流媒体信息生成操作指令，来控制终端设备侧的输出信息。如此，就能够达到更加直观的针对终端设备输出的信息进行控制，为用户提供了更加丰富的交互场景，并且提升控制的准确度。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种设备控制方法，应用于移动终端，其特征在于，所述方法包括：
通过图像采集模块采集包含有至少一个设备的图像，在显示区域中呈现包含有至少一个设备的画面；
基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；
基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式，基于所述通信方式将所述操作指令发送至所述第一目标设备；其中，所述控制界面位于对应的设备在显示区域中的显示位置处、且至少用于提供针对设备的输出信息或设备的操作参数进行控制的界面。
2.根据权利要求1所述的方法，其特征在于，所述基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令之前，所述方法还包括：
在显示区域中呈现包含有所述至少一个设备的画面，并且在所述显示区域中呈现每一个所述设备对应的控制界面。
3.根据权利要求1所述的方法，其特征在于，所述基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令，所述方法还包括：
检测到针对所述至少一个设备中的第一目标设备的选定操作时，展示针对所述目标设备的控制界面；
通过所述第一目标设备的控制界面，检测到针对所述第一目标设备的操作指令。
4.根据权利要求1所述的方法，其特征在于，所述基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别之后，所述方法还包括：
当确定设备为第一类设备时，通过无线通信功能与所述设备建立无线通信连接；当确定设备为第二类设备时，从网络侧获取到所述设备对应的红外指令集，所述红外指令集中包括有至少一个针对设备的红外指令；
相应的，基于所述第一目标设备的设备类别确定对应的通信方式，基于所述通信方式将所述操作指令发送至所述第一目标设备，包括：
当所述第一目标设备为第一类设备时，通过无线通信连接将所述操作指令发送至第一目标设备；
当所述第一目标设备为第二类设备时，基于所述操作指令确定对应的红外指令，将所述红外指令发送至第一目标设备。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
检测到针对所述至少一个第一类设备中的第二目标设备的屏幕投影指令时，判断所述第二目标设备是否具备用于输出图像的显示区域；
若所述第二目标设备具备用于输出图像的显示区域时，向所述第二目标设备发送获取屏幕数据的请求；
接收到所述第二目标设备基于所述获取屏幕数据的请求发来的流媒体信息，控制在显示区域中由呈现包含有所述至少一个第一类设备的画面切换为输出所述流媒体信息；其中，所述流媒体信息与所述第二目标设备输出的信息保持同步。
6.一种移动终端，其特征在于，所述移动终端包括：
图像采集模块，用于采集包含有至少一个设备的图像；
显示模块，用于在显示区域中呈现包含有至少一个设备的画面；
处理模块，用于基于所述图像对所述至少一个设备进行类别识别确定每一个设备对应的设备类别；其中，所述设备类别至少包括有能够支持无线通信功能的第一类设备、以及仅支持红外信号进行通信的第二类设备；基于所述至少一个设备中的第一目标设备的控制界面检测到对应的操作指令时，基于所述第一目标设备的设备类别确定对应的通信方式；其中，所述控制界面位于对应的设备在显示区域中的显示位置处、且至少用于提供针对设备的输出信息或设备的操作参数进行控制的界面；
通信模块，用于基于所述通信方式将所述操作指令发送至所述第一目标设备。
7.根据权利要求6所述的移动终端，其特征在于，所述处理模块，用于在显示区域中呈现包含有所述至少一个设备的画面，并且在所述显示区域中呈现每一个所述设备对应的控制界面。
8.根据权利要求6所述的移动终端，其特征在于，所述处理模块，用于检测到针对所述至少一个设备中的第一目标设备的选定操作时，展示针对所述目标设备的控制界面；通过所述第一目标设备的控制界面，检测到针对所述第一目标设备的操作指令。
9.根据权利要求6所述的移动终端，其特征在于，所述处理模块，用于当确定设备为第一类设备时，通过无线通信功能与所述设备建立无线通信连接；当确定设备为第二类设备时，从网络侧获取到所述设备对应的红外指令集，所述红外指令集中包括有至少一个针对设备的红外指令；
当所述第一目标设备为第一类设备时，通过无线通信连接将所述操作指令发送至第一目标设备；当所述第一目标设备为第二类设备时，基于所述操作指令确定对应的红外指令，将所述红外指令发送至第一目标设备。
10.根据权利要求6所述的移动终端，其特征在于，所述处理模块，用于检测到针对所述至少一个第一类设备中的第二目标设备的屏幕投影指令时，判断所述第二目标设备是否具备用于输出图像的显示区域；若所述第二目标设备具备用于输出图像的显示区域时，向所述第二目标设备发送获取屏幕数据的请求；接收到所述第二目标设备基于所述获取屏幕数据的请求发来的流媒体信息，控制在显示区域中由呈现包含有所述至少一个第一类设备的画面切换为输出所述流媒体信息；其中，所述流媒体信息与所述第二目标设备输出的信息保持同步。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610872018.XA CN106341606A (zh) | 2016-09-29 | 2016-09-29 | 一种设备控制方法及移动终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610872018.XA CN106341606A (zh) | 2016-09-29 | 2016-09-29 | 一种设备控制方法及移动终端 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106341606A true CN106341606A (zh) | 2017-01-18 |
Family
ID=57839600
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610872018.XA Pending CN106341606A (zh) | 2016-09-29 | 2016-09-29 | 一种设备控制方法及移动终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106341606A (zh) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107222630A (zh) * | 2017-06-21 | 2017-09-29 | 努比亚技术有限公司 | 设备控制方法、移动终端以及计算机可读介质 |
| CN108156668A (zh) * | 2017-11-22 | 2018-06-12 | 努比亚技术有限公司 | 一种通信交互方法、终端及计算机可读存储介质 |
| CN108829481A (zh) * | 2018-06-14 | 2018-11-16 | 青岛海信移动通信技术股份有限公司 | 基于控制电子设备的遥控器界面的呈现方法 |
| CN109246616A (zh) * | 2018-10-23 | 2019-01-18 | 维沃移动通信有限公司 | 一种提醒方法和装置 |
| CN110288820A (zh) * | 2019-07-31 | 2019-09-27 | 歌尔股份有限公司 | 一种遥控设备与主机的连接方法 |
| CN110719514A (zh) * | 2019-11-11 | 2020-01-21 | 聚好看科技股份有限公司 | 设备的控制方法及系统、终端 |
| CN110858814A (zh) * | 2018-08-23 | 2020-03-03 | 珠海格力电器股份有限公司 | 一种智能家居设备的控制方法及装置 |
| CN110895869A (zh) * | 2019-11-28 | 2020-03-20 | 深圳市致行科技有限公司 | 一种用于遥控器的控制方法及其系统 |
| CN112147907A (zh) * | 2019-06-28 | 2020-12-29 | 广东美的制冷设备有限公司 | 运行控制方法、装置、线控设备和存储介质 |
| CN112383664A (zh) * | 2020-10-15 | 2021-02-19 | 华为技术有限公司 | 一种设备控制方法、第一终端设备及第二终端设备 |
| CN113645265A (zh) * | 2021-05-22 | 2021-11-12 | 运链物流管理(江苏)有限公司 | 一种物联网智能识别系统 |
| CN114779996A (zh) * | 2022-04-07 | 2022-07-22 | 厦门大学 | 一种设备运行参数获取装置和设备控制机 |
| CN116434514A (zh) * | 2023-06-02 | 2023-07-14 | 永林电子股份有限公司 | 一种红外遥控方法以及红外遥控装置 |
| TWI811141B (zh) * | 2022-09-12 | 2023-08-01 | 宏達國際電子股份有限公司 | 遠程控制系統、遠程控制器以及遠程控制方法 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101827227A (zh) * | 2009-03-02 | 2010-09-08 | 北京千术宽文化传媒有限公司 | 基于移动终端的遥控器 |
| US20120044405A1 (en) * | 2010-08-19 | 2012-02-23 | Hoya Corporation | Focusing image verifying device |
| CN103596063A (zh) * | 2013-11-20 | 2014-02-19 | 海信集团有限公司 | 终端、电视机、多屏互动系统和抓屏参数的设置方法 |
| CN103916697A (zh) * | 2014-04-04 | 2014-07-09 | 深圳市同洲电子股份有限公司 | 一种多应用显示的方法及相关智能终端 |
| CN104977904A (zh) * | 2014-04-04 | 2015-10-14 | 浙江大学 | 一种可见即可控的智能家居控制系统及控制方法 |
| CN105160854A (zh) * | 2015-09-16 | 2015-12-16 | 小米科技有限责任公司 | 设备控制方法、装置和终端设备 |
| CN105828139A (zh) * | 2016-04-06 | 2016-08-03 | 乐视控股（北京）有限公司 | 一种视频投屏方法及装置 |
-
2016
- 2016-09-29 CN CN201610872018.XA patent/CN106341606A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101827227A (zh) * | 2009-03-02 | 2010-09-08 | 北京千术宽文化传媒有限公司 | 基于移动终端的遥控器 |
| US20120044405A1 (en) * | 2010-08-19 | 2012-02-23 | Hoya Corporation | Focusing image verifying device |
| CN103596063A (zh) * | 2013-11-20 | 2014-02-19 | 海信集团有限公司 | 终端、电视机、多屏互动系统和抓屏参数的设置方法 |
| CN103916697A (zh) * | 2014-04-04 | 2014-07-09 | 深圳市同洲电子股份有限公司 | 一种多应用显示的方法及相关智能终端 |
| CN104977904A (zh) * | 2014-04-04 | 2015-10-14 | 浙江大学 | 一种可见即可控的智能家居控制系统及控制方法 |
| CN105160854A (zh) * | 2015-09-16 | 2015-12-16 | 小米科技有限责任公司 | 设备控制方法、装置和终端设备 |
| CN105828139A (zh) * | 2016-04-06 | 2016-08-03 | 乐视控股（北京）有限公司 | 一种视频投屏方法及装置 |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107222630B (zh) * | 2017-06-21 | 2021-01-22 | 努比亚技术有限公司 | 设备控制方法、移动终端以及计算机可读介质 |
| CN107222630A (zh) * | 2017-06-21 | 2017-09-29 | 努比亚技术有限公司 | 设备控制方法、移动终端以及计算机可读介质 |
| CN108156668A (zh) * | 2017-11-22 | 2018-06-12 | 努比亚技术有限公司 | 一种通信交互方法、终端及计算机可读存储介质 |
| CN108829481A (zh) * | 2018-06-14 | 2018-11-16 | 青岛海信移动通信技术股份有限公司 | 基于控制电子设备的遥控器界面的呈现方法 |
| WO2019237552A1 (zh) * | 2018-06-14 | 2019-12-19 | 青岛海信移动通信技术股份有限公司 | 在移动设备中呈现遥控器界面的方法 |
| CN110858814A (zh) * | 2018-08-23 | 2020-03-03 | 珠海格力电器股份有限公司 | 一种智能家居设备的控制方法及装置 |
| CN109246616A (zh) * | 2018-10-23 | 2019-01-18 | 维沃移动通信有限公司 | 一种提醒方法和装置 |
| CN109246616B (zh) * | 2018-10-23 | 2020-11-20 | 维沃移动通信有限公司 | 一种提醒方法和装置 |
| CN112147907A (zh) * | 2019-06-28 | 2020-12-29 | 广东美的制冷设备有限公司 | 运行控制方法、装置、线控设备和存储介质 |
| CN110288820A (zh) * | 2019-07-31 | 2019-09-27 | 歌尔股份有限公司 | 一种遥控设备与主机的连接方法 |
| CN110719514A (zh) * | 2019-11-11 | 2020-01-21 | 聚好看科技股份有限公司 | 设备的控制方法及系统、终端 |
| CN110895869A (zh) * | 2019-11-28 | 2020-03-20 | 深圳市致行科技有限公司 | 一种用于遥控器的控制方法及其系统 |
| CN112383664A (zh) * | 2020-10-15 | 2021-02-19 | 华为技术有限公司 | 一种设备控制方法、第一终端设备及第二终端设备 |
| CN113645265A (zh) * | 2021-05-22 | 2021-11-12 | 运链物流管理(江苏)有限公司 | 一种物联网智能识别系统 |
| CN114779996A (zh) * | 2022-04-07 | 2022-07-22 | 厦门大学 | 一种设备运行参数获取装置和设备控制机 |
| CN114779996B (zh) * | 2022-04-07 | 2023-11-21 | 厦门大学 | 一种设备运行参数获取装置和设备控制机 |
| TWI811141B (zh) * | 2022-09-12 | 2023-08-01 | 宏達國際電子股份有限公司 | 遠程控制系統、遠程控制器以及遠程控制方法 |
| CN116434514A (zh) * | 2023-06-02 | 2023-07-14 | 永林电子股份有限公司 | 一种红外遥控方法以及红外遥控装置 |
| CN116434514B (zh) * | 2023-06-02 | 2023-09-01 | 永林电子股份有限公司 | 一种红外遥控方法以及红外遥控装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106341606A (zh) | 一种设备控制方法及移动终端 | |
| CN106412291B (zh) | 一种设备控制方法及移动终端 | |
| CN105843508B (zh) | 移动终端及其截屏方法 | |
| CN108234295B (zh) | 群功能控件的显示控制方法、终端及计算机可读存储介质 | |
| CN105511776B (zh) | 一种移动终端及其控制方法 | |
| CN104731514B (zh) | 触摸操作区域单握触摸操作的识别方法及装置 | |
| CN106453538A (zh) | 屏幕共享装置和方法 | |
| KR20140133363A (ko) | 디스플레이 장치 및 이의 제어 방법 | |
| CN106507173A (zh) | 移动终端和分屏显示控制方法 | |
| CN108664185A (zh) | 画面显示方法、移动终端及计算机可读存储介质 | |
| CN110366027B (zh) | 一种视频管理方法及终端设备 | |
| CN106657651B (zh) | 一种投射处理方法、装置及终端 | |
| CN106569709A (zh) | 控制移动终端的装置及方法 | |
| CN106911850A (zh) | 移动终端及其截屏方法 | |
| CN109871164A (zh) | 一种消息发送方法及终端设备 | |
| CN105117155B (zh) | 移动终端及其操控方法 | |
| CN110049185A (zh) | 图像处理方法及终端设备 | |
| CN106488282A (zh) | 一种多媒体信息的输出控制方法及移动终端 | |
| CN106302137A (zh) | 群聊消息处理装置及方法 | |
| CN109151176A (zh) | 一种信息获取方法及终端 | |
| CN110062171A (zh) | 一种拍摄方法及终端 | |
| CN112312217A (zh) | 一种图像编辑方法、装置、计算机设备和存储介质 | |
| CN110276723A (zh) | 一种头像挂件生成方法、装置及相关设备 | |
| CN105278860A (zh) | 移动终端图片上传装置和方法 | |
| CN109618218A (zh) | 一种视频处理方法及移动终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170118 |
|
| RJ01 | Rejection of invention patent application after publication |