CN103440099A - 一种多屏交互方法、终端及系统 - Google Patents

一种多屏交互方法、终端及系统 Download PDF

Info

Publication number
CN103440099A
CN103440099A CN2013103537150A CN201310353715A CN103440099A CN 103440099 A CN103440099 A CN 103440099A CN 2013103537150 A CN2013103537150 A CN 2013103537150A CN 201310353715 A CN201310353715 A CN 201310353715A CN 103440099 A CN103440099 A CN 103440099A
Authority
CN
China
Prior art keywords
touch
screen
event message
terminal
touch event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013103537150A
Other languages
English (en)
Inventor
侯芷仪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN BONCAST INTERACTIVE TELEVISION CO., LTD.
Original Assignee
Shenzhen Coship Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Coship Electronics Co Ltd filed Critical Shenzhen Coship Electronics Co Ltd
Priority to CN2013103537150A priority Critical patent/CN103440099A/zh
Publication of CN103440099A publication Critical patent/CN103440099A/zh
Priority to PCT/CN2014/084321 priority patent/WO2015021928A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例涉及数字电视技术领域，公开了一种多屏交互方法、终端及系统。其中，该方法包括：接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放所述数据流；监听对所述触摸屏的触摸操作，并生成触摸事件消息，所述触摸事件消息包括触摸位置信息；发送所述触摸事件消息给所述数字电视终端，以使得所述数字电视终端根据所述触摸事件消息显示触轨。通过本发明实施例，能够提高多屏互动的操控的准确性，并提升用户体验。

Description

一种多屏交互方法、终端及系统
技术领域
本发明涉及数字电视技术领域，具体涉及一种多屏交互方法、终端及系统。
背景技术
随着科技的发展以及人们对生活品质的要求的提高，生活中出现了各种尺寸和功能的有屏电子产品。不同的有屏电子产品有不同的优缺点，于是就有了把各个屏的优点结合起来，形成多屏互动的需求。目前在数字生活网络联盟（Digital Living Network Alliance，DLNA）等多屏互动协议的支持下，多屏结合的需求得以实现，其中，电视在多屏互动中的核心功能是显示功能，而手机的核心功能是操控功能。
现有技术之一是，把手机当成触摸板，在手机上进行触摸操作时，电视上用鼠标箭头指示当前操作的区域。这种方法有几个缺陷：手机仅被当成触摸板，手机上不能够显示与电视端同步的界面，不能够形成一对一的界面映射，操作时准确性不高，而且手机不能同时显示播放内容，只能够操作，不能够实现多屏同分享，此外，如果在手机上进行多点触控时，单一鼠标箭头图标无法同步实现该效果，无法给用户的操作提供及时的反馈。
现有技术之二是，手机当成遥控器使用，通过电视界面上原有的焦点移动来实现定位。这种方法的缺陷为：没有利用手机操作方便的优点，手机仅仅只是另外一个遥控器。界面上仅有和遥控器对应的虚拟按键，操作时，还是需要像操作遥控器一样利用按键进行切换，再者，在手机上操作时，因为按键是虚拟的，无法实现触摸感，用户仍然需要一边看电视，一边看着手机操作。
发明内容
本发明实施例公开了一种多屏交互方法、终端及系统，能够提高多屏互动的操控的准确性，并提升用户体验。
本发明实施例的第一方面提供一种多屏交互方法，所述方法包括：
接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放所述数据流；
监听对所述触摸屏的触摸操作，并生成触摸事件消息，所述触摸事件消息包括触摸位置信息；
发送所述触摸事件消息给所述数字电视终端，以使得所述数字电视终端根据所述触摸事件消息显示触轨。
进一步，所述监听对所述触摸屏的触摸操作，并生成触摸事件消息包括：
监听对所述触摸屏的单点或多点触摸操作，并生成触摸事件消息，所述触摸事件消息还包括触摸动作信息。
本发明实施例的第二方面提供另一种多屏交互方法，所述方法包括：
推送实时屏幕数据流给移动终端，以使得所述移动终端在触摸屏上播放所述数据流；
接收所述移动终端实时监听所述触摸屏的触摸操作而生成的触摸事件消息，所述触摸事件消息包括触摸位置信息；
根据所述触摸事件消息显示触轨。
进一步，所述接收所述移动终端实时监听所述触摸屏的触摸操作而生成的触摸事件消息包括：
接收所述移动终端实时监听所述触摸屏的单点或多点触摸操作而生成的触摸事件消息，所述触摸事件消息还包括触摸动作信息。
进一步，所述根据所述触摸事件消息显示触轨之后，所述方法还包括：
判断所述触轨是否落入有效位置，若落入，则按照所述有效位置与按键指令的对应关系，获取所述有效位置的对应按键指令，并进行与所述对应按键指令相应的操作。
本发明实施例的第三方面提供一种移动终端，所述移动终端包括：
数据流接收模块，用于接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放所述数据流；
消息生成模块，用于监听对所述触摸屏的触摸操作，并生成触摸事件消息，所述触摸事件消息包括触摸位置信息；
消息发送模块，用于发送所述触摸事件消息给所述数字电视终端，以使得所述数字电视终端根据所述触摸事件消息显示触轨。
进一步所述消息生成模块具体用于：
监听对所述触摸屏的单点或多点触摸操作，并生成触摸事件消息，所述触摸事件消息还包括触摸动作信息。
本发明实施例第四方面提供一种数字电视终端，所述数字电视终端包括：
数据流推送模块，用于推送实时屏幕数据流给移动终端，以使得所述移动终端在触摸屏上播放所述数据流；
消息接收模块，用于接收所述移动终端实时监听所述触摸屏的触摸操作而生成的触摸事件消息，所述触摸事件消息包括触摸位置信息；
触轨显示模块，用于根据所述触摸事件消息显示触轨。
进一步，所述消息接收模块具体用于：
接收所述移动终端实时监听所述触摸屏的单点或多点触摸操作而生成的触摸事件消息，所述触摸事件消息还包括触摸动作信息。
进一步，所述数字电视终端还包括：
操作模块，用于在触轨显示模块根据所述触摸事件消息中的触摸位置信息显示触轨之后，判断所述触轨是否落入有效位置，若落入，则按照所述有效位置与按键指令的对应关系，获取所述有效位置的对应按键指令，并进行与所述对应按键指令相应的操作。
本发明实施例第五方面提供一种多屏交互系统，所述系统包括移动终端和数字电视终端，其中：
所述移动终端为本发明实施例第三方面提供的移动终端；
所述数字电视终端为本发明实施例第四方面提供的数字电视终端。
本发明实施例中，移动终端可接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放该数据流，还可监听对触摸屏的触摸操作，并生成触摸事件消息，发送触摸事件消息给数字电视终端，以使得数字电视终端根据触摸事件消息显示触轨，通过实时传屏实现移动终端同步显示操作触轨，从而可提高多屏互动的操控的准确性，并提升用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种多屏交互方法的流程图；
图2是本发明实施例提供的另一种多屏交互方法的流程图；
图3是本发明实施例提供的一种移动终端的结构示意图；
图4是本发明实施例提供的一种数字电视终端的结构示意图；
图5是本发明实施例提供的另一种数字电视终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例公开了一种多屏交互方法、终端及系统，能够提高多屏互动的操控的准确性，并提升用户体验。以下分别进行详细说明。·
请参阅图1，图1示出了本发明实施例提供的一种多屏交互方法的流程图。如图1所示，该多屏交互方法可以包括以下步骤。
S101：接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放数据流；
具体地，当数字电视终端开启桌面启动器（launcher），并处于使用状态时，移动终端可发送多屏控制“开始”指令给数字电视终端，数字电视终端接收到多屏控制“开始”指令后，设置参数（例如，IP、带宽和分辨率等）和推流方式（HTTP或UDP），同时数字电视终端上的门户（portal）显示改变，此时多屏互动连接成功，移动终端（例如，智能手机，IPAD等）可接收数字电视终端推送的实时屏幕数据流，这里的实时屏幕数据流可以包括音视频数据流和点播节目信息数据流，当然还可以包括播放控制界面等信息数据，移动终端收到数据流后，可在移动终端的触摸屏上进行播放，即移动终端的触摸屏上显示的画面可与数字电视终端上显示的画面同步；与此同时，数字电视终端开启消息事件监听，以随时监听移动终端侧可能发送而来的消息，同时数字电视终端可以开启12170服务端。
S102：监听对触摸屏的触摸操作，并生成触摸事件消息；
具体地，移动终端显示与数字电视终端上相同的画面后，可开启触摸监听，用户可在移动终端的触摸屏上进行单点或多点触摸操作，例如，用户触摸屏上点击点播节目列表中的某个节目。移动终端监听到用户对触摸屏的单点或多点触摸操作后，可生成触摸事件消息，触摸事件消息包括触摸位置信息，还可以包括触摸动作信息，例如，触摸事件消息的格式可以为（x,y,p），其中，x、y为触摸坐标值，p为触摸值，p=1表示按下，p=0表示弹起。
S103：发送触摸事件消息给数字电视终端，以使得数字电视终端根据触摸事件消息显示触轨；
具体地，移动终端可通过TCP/UDP通道发送触摸事件消息给数字电视终端侧的12170服务端，由于数字电视终端（例如，Android4.0数字电视终端）自带了触轨功能，数字电视终端接收到触摸事件消息后，可根据触摸事件消息中的触摸位置信息显示触轨（即在触摸位置（x，y）处以光晕等效果来展示当前移动终端的实时触摸操作），同时数字电视终端上显示触轨的画面数据会返回到移动终端，从而使得移动终端上也可显示相应的触轨。其中，触摸事件消息还包括触摸动作消息，例如，当移动终端监听到触摸操作为滑动等连续操作时，即根据连续的触摸事件消息显示动态触摸操作的同步触轨，可以理解为，触摸动作消息P=1时，在触摸位置（x，y）处以光晕等效果来展示当前移动终端的实时触摸操作，当P=0时，即当前触轨结束。
进一步的，数字电视终端可判断触轨是否落入有效位置，若落入，则按照有效位置与按键指令的对应关系，获取有效位置的对应按键指令，并进行与对应按键指令相应的操作。例如，用户可通过触摸移动终端上的触摸屏，使触轨选定点播节目列表中的某个节目，从而使数字电视终端播放该节目。
在图1提供的多屏交互方法中，移动终端可接收数字电视终端推送的实时屏幕数据流以显示与数字电视终端的播放界面相同的界面，还可将关于触摸屏的触摸事件消息发送给数字电视终端，以使得数字电视终端根据触摸事件消息显示触轨，通过实时传屏实现移动终端同步显示操作触轨，从而可提高多屏互动的操控的准确性，并提升用户体验。
请参阅图2，图2示出了本发明实施例提供的另一种多屏交互方法的流程图。如图2所示，该多屏交互方法可以包括以下步骤。
S201：推送实时屏幕数据流给移动终端，以使得移动终端在触摸屏上播放数据流；
具体地，当数字电视终端开启launcher，并处于使用状态时，移动终端可发送多屏控制“开始”指令给数字电视终端，数字电视终端接收到多屏控制“开始”指令后，设置参数（例如，IP、带宽和分辨率等）和推流方式（HTTP或UDP），同时数字电视终端上的portal显示改变，此时多屏互动连接成功，数字电视终端可推送实时屏幕数据流给移动终端（例如，智能手机，IPAD等），这里的实时屏幕数据流可以包括音视频数据流和点播节目信息数据流，当然还可以包括播放控制界面等信息数据，移动终端收到实时屏幕数据流后，可在移动终端的触摸屏上进行播放，即移动终端的触摸屏上显示的画面可与数字电视终端上显示的画面同步；与此同时，数字电视终端开启消息事件监听，以随时监听移动终端侧可能发送而来的消息，同时数字电视终端可开启12170服务端。
S202：接收移动终端实时监听触摸屏的触摸操作而生成的触摸事件消息；
具体地，移动终端显示与数字电视终端上相同的画面后，可开启触摸监听，用户可在移动终端的触摸屏上进行单点或多点触摸操作，例如，用户触摸屏上点击点播节目列表中的某个节目。移动终端监听到用户对触摸屏的单点或多点触摸操作后，可生成触摸事件消息，触摸事件消息包括触摸位置信息，进一步的，还包括触摸动作信息，例如，触摸事件消息的格式可以为（x,y,p），其中，x、y为触摸坐标值，p为触摸值，p=1表示按下，p=0表示弹起。此外，数字电视终端可利用数字电视终端侧的12170服务端通过TCP/UDP通道接收移动终端实时监听触摸屏的单点或多点触摸操作而生成的触摸事件消息。
S203：根据触摸事件消息显示触轨；
具体地，数字电视终端可将触摸事件消息中的触摸位置信息转化为数字电视终端的显示位置信息，并在转化后的位置信息所指示的位置上显示触轨，同时数字电视终端上显示触轨的画面数据会返回到移动终端，从而使得移动终端上也可显示相应的触轨。其中，触摸事件消息还包括触摸动作消息，例如，当移动终端监听到触摸操作为滑动等连续操作时，即根据连续的触摸事件消息显示动态触摸操作的同步触轨，可以理解为，触摸动作消息P=1时，在触摸位置（x，y）处以光晕等效果来展示当前移动终端的实时触摸操作，当P=0时，即触摸操作结束，同步的，当前触轨结束。
进一步的，数字电视终端可判断触轨是否落入有效位置，若落入，则按照有效位置与按键指令的对应关系，获取有效位置的对应按键指令，并进行与对应按键指令相应的操作。例如，用户可通过触摸移动终端上的触摸屏，使触轨选定点播节目列表中的某个节目，从而使数字电视终端播放该节目。
在图2提供的多屏交互方法中，数字电视终端可推送实时屏幕数据流给移动终端，以使得移动终端显示与数字电视终端的播放界面相同的界面，还可接收移动终端实时监听触摸屏的触摸操作而生成的触摸事件消息，根据触摸事件消息显示触轨，通过实时传屏实现移动终端同步显示操作触轨，从而可提高多屏互动的操控的准确性，并提升用户体验。
请参阅图3，图3示出了本发明实施例提供的一种移动终端的结构示意图。该移动终端30可以是，例如，智能手机或IPAD。如图3所示，该移动终端30可以包括数据流接收模块301、消息生成模块302和消息发送模块303，其中：
数据流接收模块301，用于接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放接收到的实时屏幕数据流；具体地，当数字电视终端开启launcher，并处于使用状态时，移动终端可发送多屏控制“开始”指令给数字电视终端，数字电视终端接收到多屏控制“开始”指令后，设置参数（例如，IP、带宽和分辨率等）和推流方式（HTTP或UDP），同时数字电视终端上的portal显示改变，此时多屏互动连接成功，数据流接收模块301可接收数字电视终端推送的实时屏幕数据流，这里的实时屏幕数据流可以包括音视频数据流和点播节目信息数据流，当然还可以包括播放控制界面等信息数据，移动终端30收到数据流后，可在移动终端30的触摸屏上进行播放，即移动终端30的触摸屏上显示的画面可与数字电视终端上显示的画面同步；与此同时，数字电视终端开启消息事件监听，以随时监听移动终端30侧可能发送而来的消息，同时数字电视终端可开启12170服务端。
消息生成模块302，用于监听对触摸屏的触摸操作指令，并生成触摸事件消息；具体地，移动终端30显示与数字电视终端上相同的画面后，可开启触摸监听，用户可在移动终端30的触摸屏上进行单点或多点触摸操作，例如，用户触摸屏上点击点播节目列表中的某个节目。移动终端30接收到用户对触摸屏的单点或多点触摸操作后，可生成触摸事件消息，触摸事件消息包括触摸位置信息，还可以包括触摸动作信息，例如，触摸事件消息的格式可以为（x,y,p），其中，x、y为触摸坐标值，p为触摸值，p=1表示按下，p=0表示弹起。
消息发送模块303，用于发送触摸事件消息给数字电视终端，以使得数字电视终端根据触摸事件消息显示触轨；具体地，移动终端可通过TCP/UDP通道发送触摸事件消息给数字电视终端侧的12170服务端，由于数字电视终端（例如，Android4.0数字电视终端）具备触轨功能，数字电视终端接收到触摸事件消息后，可根据触摸事件消息中的触摸位置信息显示触轨，同时数字电视终端上显示触轨的画面数据会返回到移动终端，从而使得移动终端上也可显示相应的触轨。其中，触摸事件消息还包括触摸动作消息，例如，当移动终端监听到触摸操作为滑动等连续操作时，即根据连续的触摸事件消息显示动态触摸操作的同步触轨，可以理解为，触摸动作消息P=1时，在触摸位置（x，y）处以光晕等效果来展示当前移动终端的实时触摸操作，当P=0时，即当前触轨结束。
进一步的，数字电视终端可判断触轨是否落入有效位置，若落入，则按照有效位置与按键指令的对应关系，获取有效位置的对应按键指令，并进行与对应按键指令相应的操作。例如，用户可通过触摸移动终端上的触摸屏，使触轨选定点播节目列表中的某个节目，从而使数字电视终端播放该节目。
其中，图3提供的移动终端可接收数字电视终端推送的实时屏幕数据流以显示与数字电视终端的播放界面相同的界面，还可将关于触摸屏的触摸事件消息发送给数字电视终端，以使得数字电视终端根据触摸事件消息显示触轨，通过实时传屏实现移动终端同步显示操作触轨，从而可提高多屏互动的操控的准确性，并提升用户体验。
请参阅图4，图4示出了本发明实施例提供的一种数字电视终端的结构示意图。如图4所示，该数字电视终端40可以包括数据流推送模块401、消息接收模块402和触轨显示模块403，其中：
数据流推送模块401，用于推送实时屏幕数据流给移动终端，以使得移动终端在触摸屏上播放实时屏幕数据流；具体地，当数字电视终端40开启launcher，并处于使用状态时，移动终端可发送多屏控制“开始”指令给数字电视终端40，数字电视终端40接收到多屏控制“开始”指令后，设置参数（例如，IP、带宽和分辨率等）和推流方式（HTTP或UDP），同时数字电视终端40上的portal显示改变，此时多屏互动连接成功，数据流推送模块401可推送实时屏幕数据流给移动终端（例如，智能手机，IPAD等），这里的实时屏幕数据流可以包括音视频数据流和点播节目信息数据流，当然还可以包括播放控制界面等信息数据，移动终端收到实时屏幕数据流后，可在移动终端的触摸屏上进行播放，即移动终端的触摸屏上显示的画面可与数字电视终端40上显示的画面同步；与此同时，数字电视终端40开启消息事件监听，以随时监听移动终端侧可能发送而来的消息，同时数字电视终端40可开启12170服务端。
消息接收模块402，用于接收移动终端实时监听触摸屏的触摸操作指令而生成的触摸事件消息；具体地，移动终端显示与数字电视终端40上相同的画面后，可开启触摸监听，用户可在移动终端的触摸屏上进行单点或多点触摸操作，例如，用户触摸屏上点击点播节目列表中的某个节目。移动终端监听到用户对触摸屏的单点或多点触摸操作后，可生成触摸事件消息，触摸事件消息包括触摸位置信息，还可以包括触摸动作信息，例如，触摸事件消息的格式可以为（x,y,p），其中，x、y为触摸坐标值，p为触摸值，p=1表示按下，p=0表示弹起。此外，数字电视终端40可利用数字电视终端40侧的12170服务端通过TCP/UDP通道接收移动终端根据触摸屏的单点或多点触摸操作而生成的触摸事件消息。
触轨显示模块403，用于根据触摸事件消息显示触轨；具体地，数字电视终端40可将触摸事件消息中的触摸位置信息转化为数字电视终端40的显示位置信息，并在转化后的位置信息所指示的位置上显示触轨，同时数字电视终端40上显示触轨的画面数据会返回到移动终端，从而使得移动终端上也可显示相应的触轨。其中，触摸事件消息还包括触摸动作消息，例如，当移动终端监听到触摸操作为滑动等连续操作时，即根据连续的触摸事件消息显示动态触摸操作的同步触轨，可以理解为，触摸动作消息P=1时，在触摸位置（x，y）处以光晕等效果来展示当前移动终端的实时触摸操作，当P=0时，即当前触轨结束。
其中，图4提供的数字电视终端可推送实时屏幕数据流给移动终端，以使得移动终端显示与数字电视终端的播放界面相同的界面，还可接收移动终端实时监听触摸屏的触摸操作而生成的触摸事件消息，根据触摸事件消息显示触轨，通过实时传屏实现移动终端同步显示操作触轨，从而可提高多屏互动的操控的准确性，并提升用户体验。
请参阅图5，图5示出了本发明实施例提供的另一种数字电视终端的结构示意图。其中，图5所示的数字电视终端50是由图4所示的数字电视终端40进行优化得到的。在图5所示的数字电视终端50中，进一步包括了操做模块501，其中：
操做模块501，用于在触轨显示模块403根据触摸事件消息显示触轨之后，判断触轨是否落入有效位置，若落入，则按照有效位置与按键指令的对应关系，获取有效位置的对应按键指令，并进行与对应按键指令相应的操作。
其中，图5提供的数字电视终端可与移动终端进行同步显示，还可接收移动终端实时监听触摸屏的触摸操作而生成的触摸事件消息，根据触摸事件消息显示触轨，并根据触轨的位置进行相应的操作，从而可提高多屏互动的操控的准确性，并提升用户体验。
本发明实施例还提供一种多屏交互系统，该多屏交互系统包括移动终端和数字电视终端，其中：
移动终端，用于接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放该数据流，监听对触摸屏的触摸操作，并生成触摸事件消息，以及发送触摸事件消息给数字电视终端。
数字电视终端，用于推送实时屏幕数据流给移动终端，以使得移动终端在触摸屏上播放该数据流，还用于接收移动终端实时监听触摸屏的触摸操作而生成的触摸事件消息，根据触摸事件消息显示触轨。
进一步，该多屏交互系统中的移动终端可以是如图3所示的移动终端30。
进一步，该多屏交互系统中的数字电视终端可以是如图4所示的数字电视终端40或如图5所示的数字电视终端50。
本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本发明实施例装置中的模块或单元可以根据实际需要进行合并、划分和删减。
本发明实施例的模块或模块,可以以通用集成电路(如中央处理器CPU),或以专用集成电路(ASIC)来实现。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器（Read-Only Memory，ROM）、随机存取器（Random Access Memory，RAM）、磁盘或光盘等。
以上对本发明实施例所提供的多屏交互方法、终端及系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (11)

1.一种多屏交互方法，其特征在于，所述方法包括：
接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放所述数据流；
监听对所述触摸屏的触摸操作，并生成触摸事件消息，所述触摸事件消息包括触摸位置信息；
发送所述触摸事件消息给所述数字电视终端，以使得所述数字电视终端根据所述触摸事件消息显示触轨。
2.根据权利要求1所述的多屏交互方法，其特征在于，所述监听对所述触摸屏的触摸操作，并生成触摸事件消息包括：
监听对所述触摸屏的单点或多点触摸操作，并生成触摸事件消息，所述触摸事件消息还包括触摸动作信息。
3.一种多屏交互方法，其特征在于，所述方法包括：
推送实时屏幕数据流给移动终端，以使得所述移动终端在触摸屏上播放所述数据流；
接收所述移动终端实时监听所述触摸屏的触摸操作而生成的触摸事件消息，所述触摸事件消息包括触摸位置信息；
根据所述触摸事件消息显示触轨。
4.根据权利要求3所述的多屏交互方法，其特征在于，所述接收所述移动终端实时监听所述触摸屏的触摸操作而生成的触摸事件消息包括：
接收所述移动终端实时监听所述触摸屏的单点或多点触摸操作而生成的触摸事件消息，所述触摸事件消息还包括触摸动作信息。
5.根据权利要求3或4所述的多屏交互方法，其特征在于，所述根据所述触摸事件消息显示触轨之后，所述方法还包括：
判断所述触轨是否落入有效位置，若落入，则按照所述有效位置与按键指令的对应关系，获取所述有效位置的对应按键指令，并进行与所述对应按键指令相应的操作。
6.一种移动终端，其特征在于，所述移动终端包括：
数据流接收模块，用于接收数字电视终端推送的实时屏幕数据流，并在触摸屏上播放所述数据流；
消息生成模块，用于监听对所述触摸屏的触摸操作，并生成触摸事件消息，所述触摸事件消息包括触摸位置信息；
消息发送模块，用于发送所述触摸事件消息给所述数字电视终端，以使得所述数字电视终端根据所述触摸事件消息显示触轨。
7.根据权利要求6所述的移动终端，其特征在于，所述消息生成模块具体用于：
监听对所述触摸屏的单点或多点触摸操作，并生成触摸事件消息，所述触摸事件消息还包括触摸动作信息。
8.一种数字电视终端，其特征在于，所述数字电视终端包括：
数据流推送模块，用于推送实时屏幕数据流给移动终端，以使得所述移动终端在触摸屏上播放所述数据流；
消息接收模块，用于接收所述移动终端实时监听所述触摸屏的触摸操作而生成的触摸事件消息，所述触摸事件消息包括触摸位置信息；
触轨显示模块，用于根据所述触摸事件消息显示触轨。
9.根据权利要求8所述的数字电视终端，其特征在于，所述消息接收模块具体用于：
接收所述移动终端实时监听所述触摸屏的单点或多点触摸操作而生成的触摸事件消息，所述触摸事件消息还包括触摸动作信息。
10.根据权利要求8或9所述的数字电视终端，其特征在于，所述数字电视终端还包括：
操作模块，用于在触轨显示模块根据所述触摸事件消息中的触摸位置信息显示触轨之后，判断所述触轨是否落入有效位置，若落入，则按照所述有效位置与按键指令的对应关系，获取所述有效位置的对应按键指令，并进行与所述对应按键指令相应的操作。
11.一种多屏交互系统，其特征在于，所述系统包括移动终端和数字电视终端，其中：
所述移动终端为权利要求6或7所述的移动终端；
所述数字电视终端为权利要求8～10中任一项所述的数字电视终端。
CN2013103537150A 2013-08-14 2013-08-14 一种多屏交互方法、终端及系统 Pending CN103440099A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2013103537150A CN103440099A (zh) 2013-08-14 2013-08-14 一种多屏交互方法、终端及系统
PCT/CN2014/084321 WO2015021928A1 (zh) 2013-08-14 2014-08-13 一种多屏交互方法、终端及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2013103537150A CN103440099A (zh) 2013-08-14 2013-08-14 一种多屏交互方法、终端及系统

Publications (1)

Publication Number Publication Date
CN103440099A true CN103440099A (zh) 2013-12-11

Family

ID=49693790

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2013103537150A Pending CN103440099A (zh) 2013-08-14 2013-08-14 一种多屏交互方法、终端及系统

Country Status (2)

Country Link
CN (1) CN103440099A (zh)
WO (1) WO2015021928A1 (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103702159A (zh) * 2013-12-13 2014-04-02 乐视致新电子科技（天津）有限公司 人机交互控制方法、智能电视、穿戴式设备及系统
WO2015021928A1 (zh) * 2013-08-14 2015-02-19 深圳市同洲电子股份有限公司 一种多屏交互方法、终端及系统
CN104545997A (zh) * 2014-11-25 2015-04-29 深圳市理邦精密仪器股份有限公司 一种超声设备的多屏互动操作方法和系统
CN104765521A (zh) * 2014-01-07 2015-07-08 联想(北京)有限公司 一种信息处理的方法及一种装置
CN105120327A (zh) * 2015-02-04 2015-12-02 张沈平 一种电子设备间的输入方法及相应的电子设备
CN105227986A (zh) * 2015-09-24 2016-01-06 小米科技有限责任公司 同步处理方法及装置
CN105573605A (zh) * 2014-10-10 2016-05-11 广州杰赛科技股份有限公司 一种手机与电脑互动游戏方法
CN105933746A (zh) * 2016-06-20 2016-09-07 北京小米移动软件有限公司 控制播放设备的方法及装置
CN106453872A (zh) * 2016-09-28 2017-02-22 北京小米移动软件有限公司 显示控制方法和装置
CN107071551A (zh) * 2017-04-26 2017-08-18 四川长虹电器股份有限公司 应用于智能电视系统中的多屏互动屏幕响应方法
CN107589864A (zh) * 2016-07-07 2018-01-16 三星显示有限公司 多点触摸显示面板及其控制方法和系统
CN108206836A (zh) * 2016-12-16 2018-06-26 乐视汽车（北京）有限公司 同步终端屏幕的动态画面至车机的方法、终端及系统
CN108693997A (zh) * 2018-04-28 2018-10-23 广州视源电子科技股份有限公司 智能交互平板的触摸控制方法、装置及智能交互平板
CN109102335A (zh) * 2018-08-09 2018-12-28 佛山市苔藓云链科技有限公司 一种在服务器中执行媒体交互的方法
CN111467790A (zh) * 2020-04-13 2020-07-31 西安万像电子科技有限公司 目标对象的控制方法及装置、系统
CN111467791A (zh) * 2020-04-13 2020-07-31 西安万像电子科技有限公司 目标对象的控制方法及装置、系统
CN112714272A (zh) * 2020-12-14 2021-04-27 深圳市鹏创软件有限公司 设备间控制方法、终端和计算机可读存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115348478B (zh) * 2022-07-25 2023-09-19 深圳市九洲电器有限公司 设备交互显示方法、装置、电子设备及可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102446049A (zh) * 2010-10-11 2012-05-09 梁宇杰 用外接显示设备显示信息的光标操作感应处理装置和方法
CN102520850A (zh) * 2011-11-29 2012-06-27 青岛海信移动通信技术股份有限公司 一种无线传屏中输入操作的处理方法及设备
CN102630057A (zh) * 2012-04-25 2012-08-08 青岛海信电器股份有限公司 多屏互动系统、智能终端及多屏互动控制方法
CN102921171A (zh) * 2012-11-08 2013-02-13 上海广电电子科技有限公司 智能mid、电视、游戏服务器、多屏游戏系统及方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5226142B1 (ja) * 2012-02-29 2013-07-03 株式会社東芝 表示制御装置、表示制御方法、電子機器、および電子機器の制御方法
CN103984494A (zh) * 2013-02-07 2014-08-13 上海帛茂信息科技有限公司 用于多种设备间的直觉式用户互动系统及方法
CN103150117A (zh) * 2013-03-21 2013-06-12 天脉聚源(北京)传媒科技有限公司 一种关闭应用或界面的方法及装置
CN103440099A (zh) * 2013-08-14 2013-12-11 深圳市同洲电子股份有限公司 一种多屏交互方法、终端及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102446049A (zh) * 2010-10-11 2012-05-09 梁宇杰 用外接显示设备显示信息的光标操作感应处理装置和方法
CN102520850A (zh) * 2011-11-29 2012-06-27 青岛海信移动通信技术股份有限公司 一种无线传屏中输入操作的处理方法及设备
CN102630057A (zh) * 2012-04-25 2012-08-08 青岛海信电器股份有限公司 多屏互动系统、智能终端及多屏互动控制方法
CN102921171A (zh) * 2012-11-08 2013-02-13 上海广电电子科技有限公司 智能mid、电视、游戏服务器、多屏游戏系统及方法

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015021928A1 (zh) * 2013-08-14 2015-02-19 深圳市同洲电子股份有限公司 一种多屏交互方法、终端及系统
CN103702159B (zh) * 2013-12-13 2017-12-08 乐视致新电子科技（天津）有限公司 人机交互控制方法、智能电视、穿戴式设备及系统
CN103702159A (zh) * 2013-12-13 2014-04-02 乐视致新电子科技（天津）有限公司 人机交互控制方法、智能电视、穿戴式设备及系统
CN104765521A (zh) * 2014-01-07 2015-07-08 联想(北京)有限公司 一种信息处理的方法及一种装置
CN105573605A (zh) * 2014-10-10 2016-05-11 广州杰赛科技股份有限公司 一种手机与电脑互动游戏方法
CN104545997A (zh) * 2014-11-25 2015-04-29 深圳市理邦精密仪器股份有限公司 一种超声设备的多屏互动操作方法和系统
CN105120327A (zh) * 2015-02-04 2015-12-02 张沈平 一种电子设备间的输入方法及相应的电子设备
CN105120327B (zh) * 2015-02-04 2018-08-07 广州市智专信息科技有限公司 一种电子设备间的输入方法及相应的电子设备
CN105227986A (zh) * 2015-09-24 2016-01-06 小米科技有限责任公司 同步处理方法及装置
CN105933746A (zh) * 2016-06-20 2016-09-07 北京小米移动软件有限公司 控制播放设备的方法及装置
CN107589864A (zh) * 2016-07-07 2018-01-16 三星显示有限公司 多点触摸显示面板及其控制方法和系统
CN106453872A (zh) * 2016-09-28 2017-02-22 北京小米移动软件有限公司 显示控制方法和装置
CN108206836A (zh) * 2016-12-16 2018-06-26 乐视汽车（北京）有限公司 同步终端屏幕的动态画面至车机的方法、终端及系统
CN107071551B (zh) * 2017-04-26 2020-07-24 四川长虹电器股份有限公司 应用于智能电视系统中的多屏互动屏幕响应方法
CN107071551A (zh) * 2017-04-26 2017-08-18 四川长虹电器股份有限公司 应用于智能电视系统中的多屏互动屏幕响应方法
CN108693997A (zh) * 2018-04-28 2018-10-23 广州视源电子科技股份有限公司 智能交互平板的触摸控制方法、装置及智能交互平板
WO2019205634A1 (zh) * 2018-04-28 2019-10-31 广州视源电子科技股份有限公司 智能交互平板的触摸控制方法、装置及智能交互平板
CN109102335A (zh) * 2018-08-09 2018-12-28 佛山市苔藓云链科技有限公司 一种在服务器中执行媒体交互的方法
CN111467790A (zh) * 2020-04-13 2020-07-31 西安万像电子科技有限公司 目标对象的控制方法及装置、系统
CN111467791A (zh) * 2020-04-13 2020-07-31 西安万像电子科技有限公司 目标对象的控制方法及装置、系统
CN111467790B (zh) * 2020-04-13 2024-03-05 西安万像电子科技有限公司 目标对象的控制方法及装置、系统
CN111467791B (zh) * 2020-04-13 2024-04-12 西安万像电子科技有限公司 目标对象的控制方法及装置、系统
CN112714272A (zh) * 2020-12-14 2021-04-27 深圳市鹏创软件有限公司 设备间控制方法、终端和计算机可读存储介质

Also Published As

Publication number Publication date
WO2015021928A1 (zh) 2015-02-19

Similar Documents

Publication Publication Date Title
CN103440099A (zh) 一种多屏交互方法、终端及系统
US10235305B2 (en) Method and system for sharing content, device and computer-readable recording medium for performing the method
US9913301B2 (en) Content sharing method and device
CN102638715B (zh) 智能电视系统远程监控方法、相关设备以及智能电视系统
US9736518B2 (en) Content streaming and broadcasting
CN110087124A (zh) 智能电视的远程控制方法、终端设备和智能电视
KR20140011857A (ko) 이동 단말에서 디스플레이 장치의 디스플레이를 제어하기 위한 방법 및 이를 위한 이동 단말
US9756373B2 (en) Content streaming and broadcasting
WO2016033401A1 (en) Systems and methods for picture-in-picture video conference functionality
US9319455B2 (en) Method and system for seamless navigation of content across different devices
CN104796795A (zh) 一种视频内容发布方法及装置
KR20140047232A (ko) 사용자 단말 장치, sns 제공 서버 및 그들의 컨텐츠 제공 방법
CN103809874A (zh) 一种针对智能终端的交互控制系统及方法
KR20160019693A (ko) 사용자 단말 장치, 디스플레이 장치, 시스템 및 그 제어 방법
CN104079986A (zh) 一种用于实现设备间播放视频的方法与设备
CN102970611A (zh) 一种网络电视的控制方法、装置和系统
US20160373804A1 (en) Systems and methods of displaying and navigating content based on dynamic icon mapping
EP3156908A1 (en) User terminal, method for controlling same, and multimedia system
JP2013141179A (ja) 携帯端末とテレビジョン装置による通信システム、携帯端末、テレビジョン装置、携帯端末のアドレス送信方法及び情報処理プログラム
JP5296229B2 (ja) 携帯端末とテレビジョン装置による通信システム、携帯端末、テレビジョン装置、携帯端末の通信方法、携帯端末の動作プログラム
WO2017092323A1 (zh) 一种主控设备、播放设备，及其数据传输方法
US20170127120A1 (en) User terminal and control method therefor
JP5780611B2 (ja) 画像表示方法、映像処理システム、携帯端末、及び携帯端末の操作プログラム
JP2016057709A (ja) 電子会議システム、電子会議システムにおける表示制御方法及びプログラム
JPWO2013168287A1 (ja) 中継装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20151221

Address after: 518057 Guangdong city of Shenzhen province Nanshan District Hing Road 2 three college industrial comprehensive building area A 501-502

Applicant after: SHENZHEN BONCAST INTERACTIVE TELEVISION CO., LTD.

Address before: 518057 Nanshan District hi tech park, Guangdong, North District Rainbow science and Technology Building

Applicant before: Shenzhen Tongzhou Electronic Co., Ltd.

WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20131211

WD01 Invention patent application deemed withdrawn after publication