CN106664459A - 用户终端设备及控制其的方法 - Google Patents

用户终端设备及控制其的方法 Download PDF

Info

Publication number
CN106664459A
CN106664459A CN201580031688.2A CN201580031688A CN106664459A CN 106664459 A CN106664459 A CN 106664459A CN 201580031688 A CN201580031688 A CN 201580031688A CN 106664459 A CN106664459 A CN 106664459A
Authority
CN
China
Prior art keywords
content
screen
subscriber terminal
electronic device
external electronic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201580031688.2A
Other languages
English (en)
Inventor
甄在基
高昌鉐
房俊昊
李官玟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN106664459A publication Critical patent/CN106664459A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224Touch pad or touch panel provided on the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04102Flexible digitiser, i.e. constructional details for allowing the whole digitising part of a device to be flexed or rolled like a sheet of paper
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04804Transparency, e.g. transparent or translucent windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

公开了一种用户终端设备。用户终端设备包括:通信器,用于与外部电子设备通信;显示单元,用于显示屏幕;用户界面,用于接收用于屏幕的触摸互动;以及控制器,用于根据触摸互动的手指移动方向进行控制以与预映射至手指移动方向上的外部电子设备共享内容。

Description

用户终端设备及控制其的方法
技术领域
本公开涉及一种用户终端设备及其控制方法,并且更具体地涉及一种基于触摸的用户终端设备及其控制方法。
背景技术
伴随先进的电子技术,显示设备以多种类型被开发。具体来说,显示设备(例如TV、PC、膝上型计算机、平板PC、移动电话、MP3播放器等)广泛分布,使得这些显示设备在大多数家庭中被使用。
最近,为满足用户对更新和更多样化功能的需求,正尝试开发较新形式的显示设备。例如,与TV同步的第二设备提供与由TV提供的内容相关联的各种信息。
因此,需要一种方法,其可以以更多样化方式允许由TV和第二设备提供的内容的利用。
发明内容
技术问题
作出本公开以满足上述需求,并且因此,本公开的目标是提供一种用户终端设备及用户终端设备的控制方法,其能够允许通过简单触摸互动来与外部设备共享内容。
问题的解决方案
为实现上述目标,根据本公开的示例性实施方式的用户终端设备包括:通信器,配置成执行与外部电子设备的通信;显示设备,配置成显示屏幕;用户界面,配置成接收输入至屏幕的触摸互动;以及控制器,配置成根据触摸互动的手指移动方向与在该手指移动方向上先前映射的外部电子设备共享内容。
此外,控制器可将屏幕上显示的内容发送到在手指移动方向上先前映射的外部电子设备并且可与该外部电子设备共享屏幕上显示的内容。
此外,当外部电子设备处于关闭状态时,控制器可将用以开启外部电子设备的控制信号发送到外部电子设备。
此外,当屏幕上显示的内容被发送到外部电子设备并显示时,控制器可在屏幕上提供所发送内容的关联信息。
此外,控制器可控制以使屏幕上显示的内容与发送到外部电子设备并显示的内容根据拖动方向无缝连接并显示。
此外,控制器可从在触摸互动的拖动方向上先前映射的外部电子设备接收屏幕上显示的内容,并且可与外部电子设备共享内容。
此外,当触摸互动是在屏幕的向上方向上拖动的互动时,控制器可将所显示的内容发送到外部电子设备,并且当触摸互动是在屏幕的向下方向上拖动的互动时,控制器可从外部电子设备接收所显示的内容。
此外,当触摸互动是拖动到屏幕的向左方向和向右方向中之一的互动时,控制器可将所显示的内容发送到SNS服务器。
此外,当触摸互动是拖动到屏幕的向左方向和向右方向中之一的互动时,控制器可将所显示的内容存储到先前限定的存储区域。
此外,控制器可响应于对屏幕上的一个区域的预设触摸互动而进入内容共享模式,减小屏幕并显示减小的屏幕。
此外,控制器可将减小的屏幕的外部区域划分成多个区域,并提供于对应于每个所划分的区域的外部电子设备有关的信息。
此外,响应于触摸与提供于每个所划分的区域中的外部电子设备有关的信息并拖动至屏幕的中心区域的用户互动,控制器可接收对应的外部电子设备上显示的内容并显示所接收的内容。
此外,响应于触摸屏幕的中心区域并拖动至显示与提供于每个所划分的区域中的外部电子设备有关的信息的区域的用户互动,控制器可将屏幕上显示的内容发送到对应的外部电子设备。
此外,用户终端设备可根据触摸互动的拖动方向进行控制以使内容接收设备开启或使内容发送设备关闭。
同时,根据本公开的实施方式,用户终端设备的控制方法包括:执行与外部电子设备的通信;向屏幕输入触摸互动;以及根据触摸互动的手指移动方向,与在手指移动方向上先前映射的外部电子设备共享内容。
此外,共享内容的步骤可将屏幕上显示的内容发送到在手指移动方向上先前映射的外部电子设备并与外部电子设备共享屏幕上显示的内容。
此外,当外部电子设备处于关闭状态时,共享内容的步骤可将用以开启外部电子设备的控制信号发送到外部电子设备。
此外,用户终端设备的控制方法可附加地包括当屏幕上显示的内容被发送到外部电子设备并显示时将所发送内容的关联信息提供到屏幕上的步骤。
此外,共享内容的步骤可允许屏幕上显示的内容与发送到外部电子设备并显示的内容根据拖动方向无缝连接并显示。
此外,共享内容的步骤可从在触摸互动的拖动方向上先前映射的外部电子设备接收屏幕上显示的内容,并与外部电子设备共享该内容。
此外,共享内容的步骤可在触摸互动是在屏幕的向上方向上拖动的互动时将所显示的内容发送到外部电子设备,并在触摸互动是在屏幕的向下方向上拖动的互动时从外部电子设备接收所显示的内容。
此外,共享内容的步骤可在触摸互动是拖动到屏幕的向左方向和向右方向中的一个的互动时将所显示的内容发送到SNS服务器。
此外,方法可附加地包括响应于关于屏幕上的一个区域的预设触摸互动而进入内容共享模式,减小屏幕并显示减小的屏幕的步骤。
此外,在减小屏幕并显示减小的屏幕的步骤中,减小的屏幕的外部区域可划分成多个区域,并且每个所划分的区域可提供与外部电子设备有关的对应信息。
此外,响应于触摸与提供于每个所划分的区域中的外部电子设备有关的信息并将其拖动到屏幕的中心区域的用户互动,共享内容的步骤可接收对应外部电子设备上显示的内容并显示该内容,并且响应于触摸屏幕的中心区域并拖动到显示与提供于每个所划分的区域中的外部电子设备有关的信息的区域的用户互动,可将屏幕上显示的内容发送到对应的外部电子设备。
效果
根据上述本公开的各种实施方式,内容可仅使用简单用户互动方式以多种方式共享。因此,用户便利性提高。
附图说明
图1是被提供用以描述根据本公开的实施方式的控制系统的视图。
图2a和图2b是示出根据本公开的实施方式的用户终端设备的配置的框图。
图3是示出根据本公开的实施方式的存储器的配置的框图。
图4是示出根据本公开的实施方式的显示设备的配置的框图。
图5a和图5b以及图6a至图6c是被提供用以描述根据本公开的实施方式的配对显示设备和用户终端设备的方法的视图。
图7a至图7c以及图8a和图8b是被提供用以描述根据本公开的实施方式的实现网络拓扑结构的方法的视图。
图9a和图9b是被提供用以描述根据本公开的实施方式的用户终端设备的控制方法的视图。
图10是示出出于解释目的被提供的根据本公开的实施方式的内容共享模式的视图。
图11a和图11b是被提供用以描述根据本公开的另一实施方式的用户终端设备的控制方法的视图。
图12a和图12b是被提供用以描述根据本公开的另一实施方式的用户终端设备的控制方法的视图。
图13是被提供用以描述根据本公开的又一实施方式的用户终端设备的控制方法的视图。
图14a和图14b是被提供用以描述根据本公开的又一实施方式的用户终端设备的控制方法的视图。
图15a至图15c是被提供用以描述根据本公开的又一实施方式的用户终端设备的控制方法的视图。
图16是被提供用以描述根据本公开的实施方式的用户终端设备的控制方法的流程图。
具体实施方式
在下文,将参考附图详细描述本公开。
图1是提供用以描述根据本公开实施方式的控制系统的视图。
根据图1,根据本公开的实施方式的控制系统包括用户终端设备100和电子设备200。
如图1中示出的,电子设备200可实现为数字TV,但不限于此。因此,电子设备200可不仅实现为具有显示功能的各种形式的设备,例如个人计算机(PC)、导航、信息亭、数字信息显示器(DID)或附接至家用电器(例如电冰箱)的显示器,并且还实现为未配备有显示功能的其它各种形式的设备,例如音频、空调器、灯等。应注意,为解释方便,下文将基于200是显示设备的假设来描述电子设备200。
用户终端设备100可实现成使得用户终端设备100与显示设备200执行通信并且可远程控制显示设备200。例如,用户终端设备100可在提供远程控制模式或远程控制功能的应用正被驱动时对显示设备200执行远程控制功能。即,响应于用户控制显示设备200的指令,用户终端设备100可向显示设备200发送对应于所输入用户指令的控制信号。应注意,实施方式并不限于上文提供的实例,并且因此,用户终端设备100可被实现成各种形式,包括感测用户终端设备100的运动并发出对应于该运动的信号、感知语音并发出对应于所感知语音的信号、发送对应于所输入密钥的信号等的用户终端设备100。在上述实例中,用户终端设备100可实现成包括运动传感器、触摸传感器、或利用光学技术的光学操纵杆传感器、物理按钮(例如,轻触开关)、显示屏幕、麦克风等,以便接收各种形式的用户指令。
此外,用户终端设备100可与由显示设备200提供的信息同步并在实时基础上提供该信息。例如,用户终端设备100可提供接收由显示设备200显示的内容的流并显示该流的镜像功能。另外,用户终端设备100可实现成不仅提供远程控制功能,并且还提供各种终端的原始功能,例如电话呼叫、因特网功能、照相功能等。
同时,用户终端设备100可实现成根据触摸互动的互动方向与各种形式的外部设备共享内容。在下文,将参考附图描述根据本公开多种实施方式的设备控制方法。
图2是示出根据本公开实施方式的用户终端设备的构成的框图。
根据图2a,用户终端设备100包括通信器110、显示器120、用户界面130和控制器140。用户终端设备100可以是便携式终端,或者可实现成各种形式,包括平板计算机、移动电话、PMP、PDA等。
具体来说,用户终端设备100可实现成在其前侧上配备有触摸板或触摸屏的基于触摸的便携式终端。因此,用户终端设备100可实现成使得触摸传感器被嵌入为使得用户能够用手指或笔(例如,手写笔)执行程序。为此目的,用户终端设备100可实现成包括触摸传感器或利用光学技术的光学操纵杆,以便接收各种形式的用户指令的输入。
<电子设备与用户终端设备之间的互操作>
通信器110根据各种形式的通信方法执行与外部设备的通信。
具体来说,通信器110可与显示设备200通信(参见图1)。通信器120可通过多种通信技术(包括蓝牙(BT)、无线保真(WI-FI)、Zigbee、红外线(IR)、串行接口、通用串行总线(USB)、近场通信(NFC)等)与显示设备200或外部服务器(未示出)通信。
具体来说,响应于预设事件的发生,通信器110可通过根据先前定义的通信方法来执行与显示设备200通信而进入互操作状态。如本文中所使用的‘互操作’可以是指实现通信的所有状态,例如初始化用户终端设备100与显示设备200之间的通信的操作、形成网络的操作、执行设备配对的操作等。例如,用户终端设备100的设备识别信息可提供到显示设备200,并且两个设备之间的配对过程可被相应地执行。例如,响应于预设事件在用户终端设备100处的发生,可使用数字生活网络联盟(Digital Living Network Alliance)技术搜索邻近设备,并且可执行与搜索到的设备的配对以用于互操作。在一个实例中,预设事件可在用户终端设备100和显示设备200中的至少一个处发生。例如,预设事件可包括来自用户终端设备100的用以将显示设备200选择成受控设备的用户指令的输入,或用户终端设备100和显示设备200中的至少一个电源的开启。同时,将参考图5a和图5b更详细地描述根据本公开实施方式的配对用户终端设备100和显示设备200的方法。
<所显示的信息>
显示器120显示多种屏幕。该屏幕可包括播放多种内容(例如图像、视频、文本、音乐等)的屏幕、包括多种内容的应用执行屏幕、网络浏览器屏幕、图形用户界面(GUI)屏幕等。例如,当用户终端设备100实现为远程控制设备以控制显示设备200时,显示器120可提供多种UI屏幕以控制电子设备200的功能。
在上述实例中,显示器120可实现为液晶显示(LCD)面板、有机发光二极管(OLED)等,但不限于此。此外,根据需求,显示器120可实现为柔性显示器、透明显示器等。
<用于内容共享的触摸互动>
用户界面130接收多种用户互动。
具体来说,用户界面130可实现为包括触摸板或触摸屏以接收用户的触摸互动的输入的形式。如本文中所使用的‘触摸互动’可以是用以控制用户终端设备100和显示设备200中的至少一个的用户互动。
此外,用户界面130可接收关于通过触摸屏提供的各种UI屏幕的用户互动。本文中的UI屏幕可包括用以播放各种内容(例如图像、视频、文本、音乐等)的屏幕、用以执行包括各种内容的应用的屏幕、网络浏览器屏幕和图形用户界面(GUI)屏幕等。
具体来说,用户界面130可接收用以共享显示器120上显示的内容和/或外部显示设备200上显示的内容的触摸互动的输入。在此实例中,触摸互动可实现为可感测方向的多种触摸方式,例如触摸并拖动、触摸并轻击、触摸并滑动等。注意,为解释方便下文将描述触摸并拖动方式的实例。同时,下文将基于关于控制器140的描述来详细描述根据触摸互动的共享内容的方法。
控制器140控制用户终端设备100的整体操作。
<进入内容共享模式>
控制器140可根据预设事件进入内容共享模式。如本文中所使用的‘预设事件’可以是输入按压屏幕上的任意区域(例如,按压达预设时间或更长时间)的用户互动的事件,但不限于此。
控制器140可根据在内容共享模式中触摸互动的手指移动方向进行控制以使得关于外部电子设备的信息和在移动方向上先前映射的内容中的至少一个以及关于该内容的信息被共享。即,包括服务器的外部设备可在触摸互动的手指移动方向上或根据手指移动方向的拖动区域中被先前映射。注意,根据情况,可映射特定服务功能,以及外部设备。如本文中所使用的‘触摸互动’可实现为多种形式,包括拖动、轻击等,但为解释方便,下文假设触摸互动实现为拖动形式。
具体来说,控制器140可将屏幕上显示的内容发送到在触摸互动的拖动方向上先前映射的外部电子设备,并且可因此共享屏幕上显示的内容。例如,响应于在屏幕的向上方向上拖动的触摸互动,通过外部显示设备200显示的内容可被发送。
此外,控制器140可将关于屏幕上显示的内容的信息(例如,该内容的详细信息、提供该内容的信道的信息、源信息(例如,关于存储该内容的设备的信息)等)发送到在触摸互动的拖动方向上先前映射的外部电子设备,并且可因此共享关于屏幕上显示的内容的信息。在此实例中,外部电子设备可基于对应信息直接访问内容源并下载内容或接收内容流。
此外,控制器140可从在触摸互动的拖动方向上先前映射的外部电子设备接收内容和关于内容的信息中的至少一个并与该外部电子设备共享该内容。例如,响应于在屏幕的向下方向上拖动的触摸互动的输入,可从外部电子设备接收屏幕上显示的内容和关于该内容的信息。响应于从外部电子设备接收关于内容的信息,控制器140可基于所接收的关于内容的信息直接访问内容源并下载内容或接收内容流。
此外,控制器140可与在触摸互动的拖动方向上先前映射的外部服务器共享屏幕上显示的内容和关于内容的信息中的至少一个。例如,响应于接收拖动到屏幕的左侧和右侧方向中的一个的触摸互动,所显示内容可上传到SNS服务器。在此实例中,捕获所显示内容的图像可被发送到SNS服务器,或所显示内容自身(例如,视频)可上传到SNS服务器。
此外,控制器140可将内容和关于内容的信息中的至少一个存储于在触摸互动的拖动方向上先前映射的先前限定的存储区域上。例如,响应于拖动到屏幕的左侧和右侧方向中的一个的触摸互动的输入,对应内容可存储于最喜欢的区域中,即,该内容可存储为最喜欢的内容。
同时,控制器140可在内容共享模式中提供对应的UI屏幕。
具体来说,在内容正显示于屏幕的整个区域上时,当根据预设事件进入到内容共享模式中时,控制器可减小内容显示屏幕并提供该屏幕。如本文中所使用的‘预设事件’可以是输入按压屏幕上的任意区域(例如,按压达预设时间或更长时间)的用户互动的事件,但不限于此。
此外,控制器140可将经减小的屏幕的外部区域划分成基于触摸互动的拖动方向的多个区域,并提供关于与所划分区域中的每一个对应的外部电子设备的信息(包括关于外部服务器的信息、服务等)。
在此实例中,响应于触摸关于提供到所划分区域中的每一个的外部电子设备的信息并将其向屏幕中心区域拖动的用户互动,控制器140可接收对应电子设备上显示的内容并显示该内容。
此外,响应于触摸屏幕中心区域并将其拖动到在其中正在显示关于提供于所划分区域中的每一个上的外部电子设备的信息的区域的用户互动,控制器140可将屏幕上显示的内容发送到对应的外部电子设备。
此外,响应于长按其上响应于预设事件而正在显示屏幕上的一个区域上显示的缩略图、视频内容等的区域的用户互动,控制器140可放大对应的缩略图、视频内容屏幕并显示该屏幕,并且将经放大的屏幕的外部区域划分成多个区域并提供关于与所划分区域中的每一个对应的外部电子设备的信息(包括关于外部服务器的信息、服务等)。
<根据内容共享控制电源开启/关闭>
同时,控制器140可根据触摸互动的拖动方向控制内容接收设备开启或内容发送设备关闭。
具体来说,为了根据触摸互动的拖动方向而与外部电子设备共享屏幕上显示的内容,当外部电子设备处于关闭状态时,控制器140可将用以开启外部电子设备的控制信号发送到外部电子设备。因此,能够仅使用内容共享指令来自动开启处于关闭状态的电子设备,以便所发送的内容可显示于屏幕上。
此外,当所显示的内容被发送到外部电子设备时,控制器140可自动关闭显示器120的屏幕或关闭用户终端设备100的电源。例如,上述转换可根据用户设置执行。
<根据内容共享转换屏幕>
同时,控制器140可控制使得根据触摸互动发送到外部电子设备并显示的内容与屏幕上显示的内容可无缝连接并显示。例如,在正发送内容的同时,控制器140可控制使得内容屏幕的一部分显示于外部电子设备上,并且剩余部分无缝连接于剩余部分待显示于其上的用户终端设备100的屏幕上。
具体来说,控制器140可基于触摸互动的拖动的量(或拖动的位置)以滑动形式移动屏幕并显示该屏幕。在此实例中,控制器140可将关于触摸互动的拖动的量的信息提供给外部电子设备,并且外部电子设备可确定显示于用户终端设备100上的区域信息并基于确定的结果显示剩余内容区域。可替代地,控制器140可将关于根据拖动的量(或拖动的位置)的当前显示于屏幕上的图像区域的信息发送到外部电子设备。例如,可发送关于当前显示的区域的比例的信息。
此外,当屏幕上显示的内容被发送到外部电子设备并显示时,控制器140可执行关于显示器120的屏幕的屏幕转换。
具体来说,当屏幕上显示的内容被发送到外部电子设备时,控制器140可将与所发送内容相关联的信息提供到屏幕上。例如,当所发送内容是体育广播图像时,体育广播信息可提供于屏幕上。如本文中所使用的‘相关联的信息’可包括多种信息(包括由TV网络提供的各种相关联的信息、社群摘要、内容详细信息等),并且可在实时基础上更新。
在此实例中,控制器可通过外部电子设备(例如TV)接收相关联的信息,但控制器140还可通过外部服务器直接接收。
此外,当屏幕上显示的内容被发送到外部电子设备时,控制器140可通过转换成待机屏幕(或背景屏幕)或者显示预设信息等来执行屏幕转换。在此实例中,下文将描述用于构造背景屏幕的信息。
<所共享内容的提供>
同时,在内容和关于内容的信息中的至少一个被共享的时间点之后,接收内容和关于内容的信息中的至少一个的设备可从内容源(未示出)接收所共享内容或从内容发送设备接收对应内容。例如,当与外部电子设备共享关于显示于用户终端设备100的屏幕上的广播内容(例如,信道信息)的信息时,外部电子设备可基于所接收信道信息调至提供对应广播内容的广播信道并持续提供对应内容。可选地,当与外部电子设备共享显示于用户终端设备100的屏幕上的VOD内容时,外部电子设备可在实时基础上从用户终端设备100接收内容流并持续提供对应内容。可选地,当与外部电子设备共享关于显示于屏幕上的VOD内容的源信息时,该外部电子设备可基于所接收的源信息下载该VOD内容,或者接收内容流并持续提供对应内容。
<背景模式>
此外,控制器140可感测与可安装用户终端设备100/给用户终端设备100充电的支架的连接的存在,并且当感测到用户终端设备100连接至支架时,可激活背景模式。在此情况下,背景模式可在感测到至支架的连接时被激活,而不管用户终端设备100的先前屏幕状态是关闭状态还是激活状态。
控制器140在背景模式中可提供微件、空闲应用、照片、动画、广告信息等。
具体来说,控制器140在背景模式中可提供基于视频的内容广告信息、基于TPO的信息等。基于视频的内容广告信息可包括例如推荐/策略现场广播广告、推荐/策略VOD预览等的信息,并且基于TPO的信息可包括例如时间信息、天气信息、交通信息、新闻等的信息。
如上所述,在背景模式中,可提供内容广告信息(例如推荐、策略现场广告、VOD预览等)以便因此引诱用户购买内容。
此外,响应于预设事件,控制器140可改变在背景模式中提供的内容并显示该内容。例如,当预设时间过去时,控制器140可自动改变广告内容并显示该广告内容,或响应于事件(例如消息接收、通知接收等)的发生,控制器140可改变至对应事件的内容并显示该内容,或提供关于对应消息或通知的接收的提醒。
同时,当用户终端设备100未连接至支架时,控制器140可在应用超时(Timeout)之后(即,在预设时间逝去之后)关闭屏幕。
<进入初始屏幕>
在用户终端设备100正连接至支架的同时,控制器140可在感测到用户的动作时解除背景模式并提供初始屏幕。
具体来说,响应于感测到用户的接近或感知到特定用户动作,控制器140可提供初始屏幕。可选地,响应于感知到用户的抓握动作,控制器140可显示初始屏幕。
例如,控制器140可在通过接近传感器感测到用户的接近时显示初始屏幕等。
对于另一实例,响应于通过提供于用户终端设备100的两个侧表面和后表面中的至少一个上的触摸传感器感测到用户触摸,控制器140可感知存在抓握动作并显示初始屏幕。
对于又一实例,响应于通过提供于用户终端设备100中的陀螺仪传感器和加速度传感器中的至少一个感测到旋转和倾斜中的至少一者,控制器140可感知存在抓握动作并显示初始屏幕。
图2b是示出根据本公开的另一实施方式的显示设备200的详细配置的框图。根据图2b,显示设备200包括通信器110、显示器120、用户界面130、控制器140、存储器150、感测单元160和反馈提供器170。在图2b中示出的元件之中,将不冗余地详细描述与图2a中示出的那些元件重复的元件。
控制器140通过使用存储于存储器150中的各种程序来控制显示设备200的整体操作。
具体来说,控制器140包括RAM 141、ROM 142、主CPU 143、图形处理器144、第一至第n接口145-1至145-n以及总线146。
RAM 141、ROM 142、主CPU 143、图形处理器144和第一至第n接口145-1至145-n可通过总线146彼此连接。
第一至第n接口145-1至145-n可与上述相应元件连接。这些接口中的一个可变成通过网络连接至外部设备的网络接口。
主CPU 143访问存储器150并使用存储于存储器150中的O/S执行启动。然后使用存储于存储器150中的相应程序、内容、数据执行各种操作。
ROM 142存储用于系统启动的指令语言集。当响应于开启指令的输入而供电时,根据存储于ROM 142中的指令,主CPU 143将存储于存储器150中的O/S复制到RAM 141上并执行O/S以从而启动系统。当启动完成时,主CPU 143将存储于存储器150中的相应应用程序复制到RAM141上并执行复制到RAM 141上的应用程序以从而执行相应操作。
图形处理器144使用计算器(未示出)和渲染器(未示出)生成包括各种对象(例如图标、图像、文本等)的屏幕。计算器(未示出)基于所接收的控制指令根据屏幕的布局来计算属性值,例如将显示相应对象的坐标、形状、尺寸、颜色等。渲染器(未示出)基于在计算器(未示出)处计算的属性值来以包括对象的各种布局生成屏幕。在渲染器(未示出)处生成的屏幕显示于显示器120的显示区域内。
存储器150存储各种数据,例如用于驱动用户终端设备100的操作系统(O/S)、软件模块、各种多媒体内容、各种应用、在执行应用期间输入或设置的各种内容等。
具体来说,存储器150可存储对应于触摸互动的拖动方向的设备信息、服务器信息、服务信息等。
将参考图3描述存储于存储器150中的各种其它软件模块。
根据图3,存储器150可存储软件,其中,软件包括基础模块151、感测模块152、通信模块153、呈现模块154、网络浏览器模块155和服务模块156。
基础模块151是指处理从包括于显示设备100’中的硬件中的每个递送的信号并将其递送到上层模块的基本模块。基础模块151包括存储模块151-1、安全模块151-2和网络模块151-3等。存储模块151-1是指管理数据库(DB)或注册表的程序模块。主CPU 143使用存储模块151-1访问存储器150内的数据库并检索各种数据。安全模块151-2是针对硬件支持认证、请求许可、安全存储等的程序模块,并且网络模块151-3是用以支持网络连接的模块并包括DNET模块、UPnP模块等。
感测模块152从相应传感器收集信息,并且分析和管理所收集的信息。感测模块152可包括触摸辨识模块、头部方向辨识模块、面部辨识模块、语音辨识模块、运动辨识模块和NFC辨识模块等。
通信模块153设置为执行与外部的通信。通信模块153可包括用于在与外部设备的通信中使用的设备模块、消息收发模块(例如消息收发器程序、短消息服务(SMS)&多媒体消息服务(MMS)程序、电子邮件程序等)以及包括呼叫信息聚合器程序模块、VoIP模块等的电话模块。
呈现模块154设置为配置显示屏幕。呈现模块154包括用以重放多媒体内容并输出该多媒体内容的多媒体模块、以及用以执行UI和图形处理的UI渲染模块。多媒体模块可包括播放器模块、摄录像机模块、声音处理模块等。因此,生成屏幕和声音并通过重放各种多媒体内容来播放该屏幕和声音的操作被执行。UI渲染模块可包括组合图像的图像合成器模块、通过组合来生成显示图像的屏幕上的坐标的坐标组合模块、从硬件接收各种事件的X11模块、提供工具来配置2D或3D UI的2D/3D UI工具包等。
网络浏览器模块155是指通过执行网络浏览来访问网络服务器的模块。网络浏览器模块155可包括多种模块,例如用于配置网页的网络视图模块、用于执行下载的下载代理模块、书签模块、网络套件模块等。
服务模块156是包括各种应用以提供多种服务的模块。具体来说,服务模块156可包括SNS程序、内容播放程序、游戏程序、电子书程序、日历程序、报警管理程序、其它微件等。
感测单元160包括触摸传感器、地磁传感器、陀螺仪传感器、加速度传感器、接近传感器、抓握传感器等。感测单元160可感测除上述触摸互动以外的多种动作,例如接近(或移动接近)、抓握、旋转、倾斜、按压等。
触摸传感器可被实现成电容性类型或电阻性类型。电容性类型触摸传感器是指一类如下传感器:其通过使用涂覆于显示器的表面上的介电材料来在用户的身体的一部分触摸显示器的表面时感测在用户身体中激发的微电,并计算触摸坐标。电阻性类型触摸传感器包括嵌入在用户终端设备100’中的两个电极板,以使得当用户触摸时,触摸传感器感测何时位于触摸点处的上部板和下部板接触并且电流流动,以从而计算触摸坐标。另外,可使用红外线感测方法、表面超声电导方法、积分式张力测量方法、压电效应方法等感测触摸互动。
另外,用户终端设备100’可使用磁传感器和磁性传感器、光学传感器或接近传感器、而非触摸传感器来确定触摸对象(例如手指或手写笔)是否接触或接近。
接近传感器是设置成在不直接接触显示器的表面的情况下感测接近运动的传感器。接近传感器可实现为各种形式的传感器,包括形成高频磁场并感测由于磁场的在对象接近时改变的特性而引发的电流的高频振荡类型、利用磁铁的磁性类型、感测根据对象的接近变化的电容的电容性类型。
抓握传感器可与设置于触摸屏上的触摸传感器分离地安置于后表面、边缘和手柄部分上以感测用户的抓握。抓握传感器可实现为压力传感器,而非触摸传感器。
反馈提供器170提供与触摸互动有关的多种反馈。
具体来说,反馈提供器170可提供触觉反馈,并且通过该‘触觉反馈’是指通过生成振动或力或对用户终端设备100的冲击来使得用户能够感觉触觉的技术。其还称为计算机触觉技术。
具体来说,反馈提供器170可通过根据在感测单元160处感知的触摸拖动方向以不同方式应用振动条件(例如,振动频率、振动长度、振动强度、振动波形、振动位置等)来提供多种反馈。通过以不同方式应用振动方法来生成多种触觉反馈的方法是已知的,并且因此本文中将不冗余地描述。
同时,在上述实施方式中,反馈提供器170被描述为使用振动传感器提供触觉反馈,但其仅是出于说明目的而被提供。因此,触觉反馈也可通过使用压电传感器来提供。
另外,反馈提供器170也可根据触摸互动的拖动方向以声音形式、视觉形式等提供反馈。例如,反馈提供器170可提供与触摸互动的轨迹对应的视觉反馈。
另外,用户终端设备100’还可包括配置成处理音频数据的音频处理器(未示出)、配置成处理视频数据的视频处理器(未示出)、配置成不仅输出在音频处理器(未示出)处处理的相应音频数据而且还输出各种报警声音或语音消息的扬声器(未示出)、以及配置成接收用户的语音或其它声音并将其转换成音频数据的麦克风(未示出)。
图4是示出根据本公开的实施方式的显示设备的配置的框图。
如图1中示出的,显示设备200可实现为数字TV,但不限于此。因此,可无限制地应用配备有显示功能的任何远程可控设备,例如个人计算机(PC)、导航、信息亭、数字信息显示器(DID)等。
显示器210显示多种屏幕。本文中的屏幕可包括播放多种内容(例如图像、视频、文本、音乐等)的屏幕、执行包括多种内容的应用的屏幕、网络浏览器屏幕、图形用户界面(GUI)屏幕等。
在此实例中,显示器210可实现为液晶显示面板(LCD)、有机发光二极管(OLED)等,但不限于此。此外,显示器210可根据情况实现为柔性显示器、透明显示器等。
通信器220可与用户终端设备100、100’通信。具体来说,通信器220可使用上述多种通信方法与用户终端设备100、100’通信。
具体来说,通信器220可从用户终端设备100、100’接收与通过用户界面120输入的多种用户互动对应的信号。
此外,通信器220可根据预设事件将显示器210上显示的内容发送到用户终端设备100、100’。
存储器230存储各种数据,例如用于驱动显示设备200的操作系统(O/S)软件模块、各种多媒体内容、各种应用、在执行应用期间输入或设置的各种内容等。具体来说,由于存储器230可以以与如图3中示出的用户终端设备100’的存储器类似的形式实现,因此将不冗余地对其详细描述。
控制器240用于控制显示设备200的整体操作。
控制器240可根据从用户终端设备100接收的控制信号来控制操作状态,或更特定来说,控制显示设备200的显示状态。如上所述,从用户终端设备100接收的信号可呈与用户互动状态对应的信号的形式,或呈用以控制显示设备200的从与用户的触摸互动状态对应的信号转换的控制信号的形式。当从用户终端设备100接收的信号是对应于用户的触摸互动的信号时,控制器240可将对应信号转换成用以控制显示设备200的控制信号。
具体来说,当从用户终端设备100接收请求内容发送的控制信号时,控制器240可将所显示的内容发送到用户终端设备100。在此实例中,控制信号可在触摸互动在借助显示设备200映射的拖动方向上输入时被接收。
例如,当从用户终端设备100接收向下拖动信号时,或当接收到根据向下拖动操纵生成的内容发送请求信号时,控制器240可将所显示的内容发送到用户终端设备100。在此实例中,控制器240可将所显示的内容作为内容流发送到用户终端设备100,或者将信息(例如,广播内容的信道信息、网络内容的链接信息等)发送到用户终端设备100以从用户终端设备100接收所显示的内容并显示该内容。当用户终端设备100接收到内容信息时,控制器240可根据对应的内容信息调到对应信道,或访问链接地址并显示对应的内容。
此外,控制器240可根据从用户终端设备100接收的信号控制可呈各种形式(例如信道切换屏幕、音量调节屏幕、各种菜单屏幕、网页屏幕等)的UI屏幕的显示状态。
此外,根据情况,控制器240可从外部服务器(未示出)接收各种内容。例如,当用户终端设备100根据用户的指令提供SNS屏幕时,可从外部服务器(未示出)接收对应屏幕的信息。
在下文,将参考附图描述本公开的多种实施方式。
图5a和图5b以及图6a至图6c是根据本公开的实施方式的被提供用以描述显示设备与用户终端设备之间配对的方法的视图。
如图5a中示出的,用户终端设备100和显示设备200可经由接入点设备10连接以用于无线通信。例如,AP设备10可实现为递送无线保真(Wi-Fi)信号的无线路由器。注意,根据情况,可使用Wi-Fi直连(其是新的基于P2P概念的Wi-Fi技术)来直接连接Wi-Fi终端,即,不使用无线路由器。
同时,如所示出的,配备有供家用的通信终端功能的机顶盒510(其是必需的以便使用下一代双向多媒体通信服务(所谓的互动电视),例如VOD内容、图像版家庭购物、网络游戏等)可连接至显示设备200。本文中的机顶盒是指使TV成为因特网用户界面的设备和可经由因特网实际发送和接收数据的专用计算机。机顶盒510还配备有网络浏览器和协议(例如TCP/IP等)。最近的机顶盒可通过电话线路或用于有线TV用途的线路等来服务以提供网络TV服务,并且配备有接收并转换图像信号的功能作为基本功能。
如图5b中示出的,用户终端设备100将Wi-Fi数据(①)发送到显示设备200。在此实例中,来自相同制造商的显示设备200可感知该Wi-Fi数据(①),但一般通用AP可能无法感知,而是将其丢弃。在这样的实例中,改变H/W芯片组的需求可通过使用Wi-Fi标准格式定义新数据类型而降低。因此,芯片组公司可仅提供用于新数据格式的API,并且新数据格式可由制造商单独定义并保持为机密信息。同时,Wi-Fi数据是可穿透墙壁并被发送到附近的TV的Wi-Fi信号,但其可不同于配对。
然后显示设备200将Wi-Fi数据的响应数据(②)发送到用户终端设备100。具体来说,在感知到Wi-Fi数据时,显示设备200使用其当前AP连接信息作出响应。在此实例中,对不打算用于连接的目标的响应可通过使用允许仅在有限空间/距离中通信的额外技术(例如超声波、IR或NFC)来限制。
作为②的替代物,可发送用于请求连接信息的数据(③)。在此实例中,可紧接在Wi-Fi数据(①)之后使用额外技术(例如超声波、IR或NFC技术)请求来自相同制造商的附近TV的当前AP连接信息。在感知到数据(①)时,显示设备200等待请求数据(③),并且使用允许仅在有限空间/距离中通信的额外技术递送的连接信息请求数据被限制为不递送到不打算用于连接的TV。
作为②的替代物,可发送对连接信息请求的响应数据(④)。由于AP连接信息使用Wi-Fi递送,并且由于连接信息请求数据(③)仅递送到打算用于连接的TV,因此在感知到数据(③)时,显示设备200可通过一般Wi-Fi作出响应。注意,当使用超声波时,实例②需要使用TV SPK,并且因此,SPK的输出范围可能是重要的,并且在③和④的情况下,可能存在TV应具有麦克风的限制。
然后发送AP连接请求数据(⑤)。在此实例中,由于当前AP连接信息是从打算用于连接的显示设备200获得,因此该信息可用于请求至对应AP的连接。
根据上述配对方法,如图6a中示出的,配对可在最小化用户干预的情况下执行。例如,配对可仅在电源开启的情况下执行。即,当显示设备200是开启的第一个设备时,当用户终端设备100开启时,可获得存在的显示设备200内的N/W信息以便连接N/W,并且实现与显示设备200的配对,而不需要任何额外操作。相反的实例也是可行的。此外,一旦配对,这些设备便无需再次执行配对。
此外,如图6b中示出的,配对可通过区分打算用于连接的目标和不打算用于连接的目标来执行。例如,不打算用于配对的设备(例如,邻居的TV)可被区分并阻挡。
此外,如图6c中示出的,可最小化对N/W环境的限制。例如,即使当中间涉及其它N/W时也可执行配对。
此外,虽然视图中未示出,但根据情况,可涵盖额外技术(例如IR/超声波/NFC技术)的使用以便递送在打算用于配对的设备内先前连接的N/W信息等或被递送予在打算用于配对的设备内先前连接的N/W信息等。
图7a至图7c是根据本公开的实施方式的被提供用以描述实现网络拓扑结构的方法的视图。
根据图7a,由AP设备10或显示设备200至因特网的恒定可连接性可被确保。在此实例中,显示设备200和AP设备10的存在或缺少、或者至因特网的连接状态可确定连接环境。即,因特网可连接性可在任何情况下实现。
根据图7b,网络拓扑结构可根据服务场景修改成多种形式。例如,当显示设备200正将图像在实时基础上发送到用户终端设备100时,显示设备200和用户终端设备100可以以P2P方式直接连接。在此实例中,网络拓扑结构的修改快速发生从而不允许延迟问题因服务修改而出现。
根据图7c,电源开启/关闭控制可使用Wi-Fi实现。例如,用户终端设备100将必须通过Wi-Fi从电源关闭状态开启TV 100的电源,或在相反实例中,关闭TV 100的电源。
图8a和图8b是根据本公开的另一实施方式的被提供用以描述实现网络拓扑结构的方法的视图。
如图8a中示出的,用户终端设备100可实现成能够通过显示设备200内的网关服务器远程控制外部设备(例如STB)。此外,集成远程控制可在无需设立的情况下设置,以便从而控制外部设备(例如STB)。
如图8b中示出的,显示设备200和用户终端设备100可提供多种内容流,包括推动并查看、拖动并查看、多角度查看等。
在下文,将基于如上所述用户终端设备100和显示设备200彼此同步通信的假设描述本公开的多种实施方式。
图9a和图9b是被提供用以描述根据本公开的实施方式的用户终端设备的控制方法的视图。
如图9a和图9b中示出的,用户终端设备100可根据预设事件进入内容共享模式。本文中的预设事件可以是预设触摸互动(例如,长按触摸屏上的任意区域的互动),但不限于此。例如,可响应于用户终端设备100上多种先前定义的用户互动(例如收缩屏幕的触摸互动、预设运动或语音)而进入内容共享模式。
具体来说,如图9a中示出的,在内容正显示于用户终端设备100的整个屏幕上时,当输入长按屏幕上的任意区域的触摸互动时,屏幕可以以减小的尺寸显示,并且可进入内容共享模式。在此实例中,减小的屏幕的外部区域可提供用于与这些方向中的每一个对应的内容共享的目标的信息。例如,可显示信息,从而指示可根据向上的互动与TV共享内容,可根据向左的互动与外部服务器(例如SNS)共享内容,可根据向右的互动与内容记录服务(例如,收藏夹、我的内容收集)共享所显示的内容等。本文中的内容记录服务是指存储(或添加书签)最喜欢的内容和最喜欢的内容的信息的服务,其中最喜欢的内容自身可存储于特定存储区域处,或最喜欢的内容的信息可被单独存储(或添加书签)并管理。在此实例中,内容自身可存储于用户终端设备100、显示设备200或其它外部服务器(内容源服务器或内容管理服务器)中的至少一个中并在其中管理。
此外,如图9b中示出的,当输入长按用户终端设备100的屏幕上显示的缩略图区域的触摸互动时,可进入内容共享模式以共享对应于缩略图的内容。例如,如所示出的,在所选缩略图正被放大并显示的同时,关于根据每一方向的、用于内容共享的目标的信息可提供于如图9a中示出的放大屏幕的外部区域上。
同时,显示设备200(例如,TV)的屏幕是关闭(如图所示)还是开启可能并不重要。例如,当显示设备200的屏幕关闭时,用户终端设备100可进入内容共享模式,或者显示设备200的屏幕可根据用户的指令开启以在内容共享模式中将内容发送到显示设备200。可选地,根据情况,显示设备200可能需要处于预设模式中(即,处于内容共享模式中),但这可根据实施方式以各种不同方式修改。
图10是示出出于描述目的的、根据本公开的实施方式的内容共享模式的视图。
如图10中示出的,在内容正显示于整个屏幕(即,全内容屏幕)上的同时,响应于对任意区域的长按操纵或对缩略图内容的长按操纵的输入,进入用以共享对应内容的共享模式。
在此实例中,全内容屏幕减小并且缩略图内容区域放大以使屏幕转换成具有预设尺寸的屏幕,并且对应屏幕的外部区域可划分成多个区域,例如,划分成对应于角落中的每一者的区域以提供识别信息,例如对应的外部设备、服务等。例如,上部区域可提供TV上显示的内容的屏幕的一部分,左侧区域可提供对应于SNS服务器的图标信息,并且右侧区域可提供对应于内容记录服务的图标信息。上文已描述内容记录服务并且下文将不冗余地描述。
然后,当输入触摸并拖动对应内容屏幕并且将其移动到多个区域中的一个的用户互动时,对应内容可发送到对应于对应内容移动至的区域的外部设备。例如,如所示出的,当对应内容屏幕被拖动到向上方向时,对应内容可发送到TV,或者当提供于上侧上的TV屏幕被拖动到屏幕的中心时,可在用户终端设备100处接收TV上显示的内容。
图11a和图11b是被提供用以描述根据本公开的另一实施方式的用户终端设备的控制方法的视图。
如图11a中示出的,在用户终端设备100正处于内容共享模式中的同时,响应于在向上方向上拖动的触摸互动,所显示的内容1110可发送到对应于触摸互动的拖动方向的显示设备200。
在此实例中,用户终端设备100上显示的内容和发送到显示设备200的内容可在发送过程期间无缝连接并显示。例如,如所示出的,用户终端设备100上显示的内容可根据用户的拖动的位置(或速度)通过滑动移动到上侧,并且移动到上侧并从用户终端设备100的屏幕消失的内容区域可在显示设备200的屏幕上无缝连接并显示。
然后,内容1110可从用户终端设备100的屏幕消失并显示于显示设备200的屏幕上。
如图11b中示出的,假设第一内容1130显示于显示设备200的屏幕上,并且第二内容1140显示于用户终端设备100的屏幕上。
响应于在用户终端设备100的屏幕上的在向下方向上拖动的触摸互动的输入,显示设备200上显示的第一内容1130可发送到用户终端设备100。
在此实例中,如所示出的,显示设备200上显示的第一内容和发送到用户终端设备200的内容可在发送过程期间无缝连接并显示。例如,如所示出的,用户终端设备100上显示的第二内容1140可根据用户的拖动的位置(或速度)通过滑动移动到下侧,并且从显示设备200发送的第一内容1130可以以滑动方式向下移动到屏幕的上部区域并显示。在此实例中,发送到用户终端设备100的第一内容区域也可通过在显示设备200中滑动而移动到下侧并从屏幕消失。因此,从显示设备200发送到用户终端设备100的第一内容1130可在显示设备200的屏幕上无缝连接并显示。
然后,内容1130可从显示设备200的屏幕消失,并显示于用户终端设备100的屏幕上。
图12a和图12b是被提供用以描述根据本公开的另一实施方式的用户终端设备的控制方法的视图。
如图11a中示出的,图12a示出了所显示的内容1110响应于用户终端设备100上的在向上方向上拖动的触摸互动而发送到与触摸互动的拖动方向对应的显示设备200的实例。在此实例中,当内容的发送如所示地完成时,用户终端设备100的屏幕可自动关闭。
如图11b中示出的,图12b示出了显示设备200上显示的内容1130响应于用户终端设备100上的在向下方向上拖动的触摸互动而被发送到用户终端设备100的实例。在此实例中,当内容的发送如所示地完成时,显示设备200的屏幕可自动关闭。
图13是被提供用以描述根据本公开的又一实施方式的用户终端设备的控制方法的视图。
如图11a中示出的,图13示出所显示内容1110响应于用户终端设备100上的在向上方向上拖动的触摸互动而被发送到与触摸互动的拖动方向对应的显示设备200的实例。在此实例中,当内容的发送如所示地完成时,所发送的内容1110的关联信息1310可显示于用户终端设备100上。例如,当所发送的内容1110是体育广播图像时,体育广播信息可提供于屏幕上。关联信息可包括多种信息(例如各种关联信息和社群摘要、内容详细信息等),并且可在实时基础上更新。
因此,用户能够仅通过简单触摸互动检查所期望的信息,而不被他的或她的对所播放内容的查看中断。
图14a和图14b是被提供用以描述根据本公开的又一实施方式的用户终端设备的控制方法的视图。
如图14a中示出的,假设用户终端设备100的屏幕划分成多个区域(即,第一和第二区域)并显示彼此不同的第一内容1410和第二内容1420。
在此实例中,响应于触摸第二内容1420的屏幕并在向上方向上拖动的触摸互动,显示于第二区域上的第二内容1420可发送到显示设备200并显示于显示设备200的屏幕上。在此实例中,显示于用户终端设备100的第一区域上的第一内容1410可显示于用户终端设备100的整个屏幕上。
如图14b中示出的,假设第一内容1430显示于显示设备200上,并且第二内容1440显示于用户终端设备100上。
在此实例中,响应于触摸用户终端设备200的屏幕并在向上方向上拖动的触摸互动,第二内容1440可发送到显示设备200,并且显示设备200的屏幕可划分成多个区域。在此实例中,第一区域可显示最初显示的第一内容1430,并且第二区域可显示从用户终端设备100发送的第二内容1440。在此实例中,预设的第三内容可显示于用户终端设备100的屏幕上,但不限于此。
图15a至图15c是被提供用以描述根据本公开的又一实施方式的用户终端设备的控制方法的视图。
如图15a中示出的,假设在正通过显示设备200查看内容1510的同时接收到视频电话呼叫。
在此实例中,响应于电话接收屏幕1520上的在向上方向上拖动的触摸互动,该视频电话呼叫可连接于显示设备200上,并且可显示视频电话屏幕1530。在此实例中,显示设备200上显示的内容1510可发送到用户终端设备100并显示,但不限于此。
图15b是被提供用以描述控制除显示设备200以外的电子设备的实例,并假设音乐正在用户终端设备100上播放。
在此实例中,响应于在对应于音频系统1500的方向上拖动的触摸互动,正在用户终端设备100上播放的音乐可发送到音频系统1500并播放。
图15c是被提供用以描述使用除触摸互动以外的控制方法来共享内容的方法,并且如所示出的,用户终端设备100上显示的内容可响应于用户的动作而非触摸互动被发送到显示设备200。在此实例中,用户的动作可以是用户在对应于显示设备200的方向上轻扫他的或她的手掌的手掌动作,但不限于此。因此,还可应用例如轻击、平移等的动作。
图16是被提供用以描述根据本公开的实施方式的用户终端设备的控制方法的流程图。
根据图16中示出的用户终端设备的控制方法,首先,在S1610处,执行与外部电子设备的通信。
在S1620处,当触摸互动输入到屏幕时,在S1630处,根据触摸互动的手指移动方向与在手指移动方向上先前映射的外部电子设备共享内容。
此外,在S1630处共享内容的操作可将屏幕上显示的内容发送到在手指移动方向上先前映射的外部电子设备并与该外部电子设备共享屏幕上显示的内容。
此外,当外部电子设备处于关闭状态时,在S1630处共享内容的操作可将用以开启外部电子设备的控制信号发送到该外部电子设备。
此外,用户终端设备的控制方法可附加地包括当屏幕上显示的内容被发送到外部电子设备并显示时将所发送的内容的联信息提供到屏幕上的步骤。
此外,在S1630处共享内容的操作可允许屏幕上显示的内容与发送到外部电子设备并显示的内容根据拖动方向无缝连接并显示。
此外,在S1630处共享内容的操作可从在触摸互动的拖动方向上先前映射的外部电子设备接收屏幕上显示的内容,并与该外部电子设备共享该内容。
此外,在S1630处共享内容的操作可在触摸互动是在屏幕的向上方向上拖动的互动时将所显示的内容发送到外部电子设备,并且在触摸互动是在屏幕的向下方向上拖动的互动时从外部电子设备接收所显示的内容。
此外,在S1630处共享内容的操作可在触摸互动是拖动到屏幕的向左和向右方向中的一个的互动时将所显示的内容发送到SNS服务器。
此外,方法可附加地包括响应于关于屏幕上的一个区域的预设触摸互动进入内容共享模式、减小屏幕并显示缩小的屏幕的步骤。
此外,在减小屏幕并显示减小屏幕的步骤中,减小的屏幕的外部区域可划分成多个区域,并且所划分的区域中的每个可提供关于外部电子设备的对应信息。
在此实例中,响应于触摸关于提供于所划分区域中的每个中的外部电子设备的信息并将其拖动到屏幕的中心区域的用户互动,在S1630处共享内容的操作可接收对应外部电子设备上显示的内容并显示该内容,以及响应于触摸屏幕的中心区域并拖动到显示关于提供于所划分区域中的每各中的外部电子设备的信息的区域的用户互动,可将屏幕上显示的内容发送到对应的外部电子设备。
如上所述,根据本公开,用户便利性增强,因为内容可使用简单触摸互动来以多种方式共享。
同时,上述实施方式示出显示设备执行多种操作,但如上所述,该显示设备处的多种操作还可在与该显示设备通信的服务器或用户终端设备上执行。
同时,根据上述本公开的多种实施方式的显示设备、用户终端设备和服务器的控制方法可实现为计算机可执行程序代码并存储于非暂时性计算机可读介质中并且以存储状态提供到设备中的每个并由处理器执行。
例如,可提供其中存储有用以执行如下步骤的程序的非暂时性计算机可读介质:执行与外部电子设备的通信的步骤、向屏幕输入触摸互动的步骤和与在拖动方向上先前映射的外部电子设备共享内容的步骤。
非暂时性计算机可读介质是指能够半永久地存储数据并且可由设备读取的介质,而非例如寄存器、高速缓存器或存储数据的介质(其在短暂时间周期内存储数据)。具体来说,上述各种应用和程序可存储于非暂时性计算机可读介质上(例如CD、DVD、硬盘、蓝光光盘、USB、存储卡、ROM等)并被提供。
此外,前述示例性实施方式和优点仅为示例性的并且将不解释为限制示例性实施方式。本教导可容易地应用于其它类型的装置。而且,本发明构思的示例性实施方式的描述旨在是说明性的,并不限制权利要求的范围。

Claims (15)

1.一种用户终端设备,包括:
通信器,配置成执行与外部电子设备的通信;
显示设备,配置成显示屏幕;
用户界面,配置成接收输入至所述屏幕的触摸互动;以及
控制器,配置成根据所述触摸互动的手指移动方向与在所述手指移动方向上先前映射的外部电子设备共享内容。
2.根据权利要求1所述的用户终端设备,其中,所述控制器将所述屏幕上显示的内容发送到在所述手指移动方向上先前映射的所述外部电子设备并与所述外部电子设备共享所述屏幕上显示的内容。
3.根据权利要求2所述的用户终端设备,其中,当所述外部电子设备处于关闭状态时,所述控制器将用以开启所述外部电子设备的控制信号发送到所述外部电子设备。
4.根据权利要求2所述的用户终端设备,其中,当所述屏幕上显示的内容被发送到所述外部电子设备并显示时,所述控制器在所述屏幕上提供所发送的内容的关联信息。
5.根据权利要求2所述的用户终端设备,其中,所述控制器控制使得所述屏幕上显示的内容与发送到所述外部电子设备并显示的内容根据所述拖动方向无缝连接并显示。
6.根据权利要求1所述的用户终端设备,其中,所述控制器从在所述触摸互动的所述拖动方向上先前映射的所述外部电子设备接收所述屏幕上显示的内容,并与所述外部电子设备共享所述内容。
7.根据权利要求1所述的用户终端设备,其中,当所述触摸互动是在所述屏幕的向上方向上拖动的互动时,所述控制器将所显示的内容发送到所述外部电子设备,并且当所述触摸互动是在所述屏幕的向下方向上拖动的互动时,所述控制器从所述外部电子设备接收所显示的内容。
8.根据权利要求1所述的用户终端设备,其中,当所述触摸互动是拖动到所述屏幕的向左方向和向右方向中之一的互动时,所述控制器将所述所显示内容发送到SNS服务器。
9.根据权利要求1所述的用户终端设备,其中,当所述触摸互动是拖动到所述屏幕的向左方向和向右方向中之一的互动时,所述控制器将所述所显示内容存储到先前限定的存储区域。
10.根据权利要求1所述的用户终端设备,其中,所述控制器响应于对所述屏幕上的一个区域的预设触摸互动而进入内容共享模式,减小所述屏幕并显示减小的屏幕。
11.根据权利要求10所述的用户终端设备,其中,所述控制器将所述减小的屏幕的外部区域划分成多个区域,并提供与对应于每个所划分区域的外部电子设备有关的信息。
12.根据权利要求11所述的用户终端设备,其中,响应于触摸与提供于每个所划分区域中的所述外部电子设备有关的信息并拖动至所述屏幕的中心区域的用户互动,所述控制器接收对应的外部电子设备上显示的内容并显示所接收的内容。
13.根据权利要求11所述的用户终端设备,其中,响应于触摸所述屏幕的中心区域并拖动至显示与提供于每个所划分区域中的所述外部电子设备有关的信息的区域的用户互动,所述控制器将所述屏幕上显示的内容发送到对应的外部电子设备。
14.根据权利要求1所述的用户终端设备,根据所述触摸互动的拖动方向进行控制以使内容接收设备开启或使内容发送设备关闭。
15.一种用户终端设备的控制方法,包括:
执行与外部电子设备的通信;
向屏幕输入触摸互动;以及
根据所述触摸互动的手指移动方向,与在所述手指移动方向上先前映射的外部电子设备共享内容。
CN201580031688.2A 2014-06-17 2015-04-29 用户终端设备及控制其的方法 Withdrawn CN106664459A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020140073744A KR20150144641A (ko) 2014-06-17 2014-06-17 사용자 단말 장치 및 그 제어 방법
KR10-2014-0073744 2014-06-17
PCT/KR2015/004330 WO2015194755A1 (ko) 2014-06-17 2015-04-29 사용자 단말 장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
CN106664459A true CN106664459A (zh) 2017-05-10

Family

ID=54935701

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580031688.2A Withdrawn CN106664459A (zh) 2014-06-17 2015-04-29 用户终端设备及控制其的方法

Country Status (4)

Country Link
US (1) US20170147129A1 (zh)
KR (1) KR20150144641A (zh)
CN (1) CN106664459A (zh)
WO (1) WO2015194755A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111290689A (zh) * 2018-12-17 2020-06-16 深圳市鸿合创新信息技术有限责任公司 电子设备及其主控装置、控制方法、触控共享系统

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11361148B2 (en) * 2015-10-16 2022-06-14 Samsung Electronics Co., Ltd. Electronic device sharing content with an external device and method for sharing content thereof
JP2018022438A (ja) * 2016-08-05 2018-02-08 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10678419B2 (en) * 2017-03-17 2020-06-09 Sap Se Bi-directional communication between windows
US11792470B2 (en) 2020-02-07 2023-10-17 Arris Enterprises Llc Transfer of media content viewing experience using EPG guide
CN115334293B (zh) * 2022-07-11 2023-10-13 岚图汽车科技有限公司 显示系统及其投影控制方法、主副显示系统
CN115309309A (zh) * 2022-08-17 2022-11-08 维沃移动通信有限公司 内容分享方法、装置、电子设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110310796A1 (en) * 2010-06-18 2011-12-22 Um Taesue Display apparatus and method for connecting to video call thereof
US20120131458A1 (en) * 2010-11-19 2012-05-24 Tivo Inc. Flick to Send or Display Content
US20120144347A1 (en) * 2010-12-07 2012-06-07 Samsung Electronics Co., Ltd. Display device and control method thereof
WO2013111239A1 (ja) * 2012-01-26 2013-08-01 パナソニック株式会社 携帯端末、テレビ放送受信装置及び機器連携方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100033716A (ko) * 2008-09-22 2010-03-31 에스케이 텔레콤주식회사 휴대용 단말기를 이용한 미디어 제어 시스템 및 방법
KR101021857B1 (ko) * 2008-12-30 2011-03-17 삼성전자주식회사 듀얼 터치 센서를 이용하여 제어 신호를 입력하는 장치 및 방법
KR101685364B1 (ko) * 2010-01-05 2016-12-12 엘지전자 주식회사 휴대 단말기, 휴대 단말기 시스템 및 그 동작 제어방법
JP5739131B2 (ja) * 2010-10-15 2015-06-24 京セラ株式会社 携帯電子機器、携帯電子機器の制御方法及びプログラム
KR101750898B1 (ko) * 2010-12-06 2017-06-26 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101788060B1 (ko) * 2011-04-13 2017-11-15 엘지전자 주식회사 영상표시장치 및 이를 이용한 콘텐츠 관리방법
KR101410416B1 (ko) * 2011-12-21 2014-06-27 주식회사 케이티 원격 제어 방법, 시스템 및 원격 제어 사용자 인터페이스
KR101413649B1 (ko) * 2012-11-07 2014-07-09 (주)아바비젼 다수의 사용자를 위한 터치 테이블 탑 디스플레이장치
JP6271960B2 (ja) * 2012-11-26 2018-01-31 キヤノン株式会社 情報処理システム
CN104349195A (zh) * 2013-07-26 2015-02-11 天津富纳源创科技有限公司 智能电视的多用途遥控器的控制方法及控制系统
KR101512239B1 (ko) * 2013-08-09 2015-04-17 한국과학기술원 터치 명령 및 특이 터치를 이용한 디바이스 간 컨텐츠 이동 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110310796A1 (en) * 2010-06-18 2011-12-22 Um Taesue Display apparatus and method for connecting to video call thereof
US20120131458A1 (en) * 2010-11-19 2012-05-24 Tivo Inc. Flick to Send or Display Content
US20120144347A1 (en) * 2010-12-07 2012-06-07 Samsung Electronics Co., Ltd. Display device and control method thereof
WO2013111239A1 (ja) * 2012-01-26 2013-08-01 パナソニック株式会社 携帯端末、テレビ放送受信装置及び機器連携方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111290689A (zh) * 2018-12-17 2020-06-16 深圳市鸿合创新信息技术有限责任公司 电子设备及其主控装置、控制方法、触控共享系统

Also Published As

Publication number Publication date
WO2015194755A1 (ko) 2015-12-23
US20170147129A1 (en) 2017-05-25
KR20150144641A (ko) 2015-12-28

Similar Documents

Publication Publication Date Title
CN106664459A (zh) 用户终端设备及控制其的方法
CN103513767B (zh) 触觉反馈控制系统
CN104049732B (zh) 多输入控制方法和系统和支持该方法和系统的电子装置
CN105187930B (zh) 基于视频直播的互动方法及装置
US20150193036A1 (en) User terminal apparatus and control method thereof
KR101276846B1 (ko) 미디어 데이터의 스트리밍 제어방법 및 제어장치
EP2744152B1 (en) User terminal apparatus, network apparatus for enabling an intelligent communication, and control method thereof
US20130227409A1 (en) Integrating sensation functionalities into social networking services and applications
JP2019185733A (ja) 音声制御方法、端末機器、クラウドサーバ及びシステム
EP3358850B1 (en) Content playing apparatus, method for providing ui of content playing apparatus, network server, and method for controlling by network server
CN104731829B (zh) 一种网络图片的互动方法和装置
US10798153B2 (en) Terminal apparatus and server and method of controlling the same
CN104111720B (zh) 电子设备控制方法、装置及电子设备
KR20120067636A (ko) 이동 단말기 및 그 제어방법
CN104641322A (zh) 用于提供局部反馈的用户终端装置及其方法
KR101858608B1 (ko) 이동 단말기 및 이동 단말기의 제어 방법
KR20130042295A (ko) 휴대 단말기의 운영 방법 및 장치
CN106255948A (zh) 用户终端装置及其控制方法
EP2963935A1 (en) Multi screen display controlled by a plurality of remote controls
CN106909366A (zh) 一种微件显示的方法及装置
CN106464976B (zh) 显示设备、用户终端设备、服务器及其控制方法
KR20130001826A (ko) 이동 단말기 및 그 제어방법
Chen et al. Touch-driven interaction via an NFC-enabled smartphone
CN108279858A (zh) 电子设备及其操作方法
JP2017225103A (ja) 動画メディアを提供するための移動端末、これを含むシステムおよびその制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20170510