CN106454499A - 移动终端及其控制方法 - Google Patents

移动终端及其控制方法 Download PDF

Info

Publication number
CN106454499A
CN106454499A CN201610647576.6A CN201610647576A CN106454499A CN 106454499 A CN106454499 A CN 106454499A CN 201610647576 A CN201610647576 A CN 201610647576A CN 106454499 A CN106454499 A CN 106454499A
Authority
CN
China
Prior art keywords
region
touch
summary info
mobile terminal
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610647576.6A
Other languages
English (en)
Other versions
CN106454499B (zh
Inventor
朴淳东
金载云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN106454499A publication Critical patent/CN106454499A/zh
Application granted granted Critical
Publication of CN106454499B publication Critical patent/CN106454499B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10Architectures or entities
    • H04L65/1059End-user terminal functionalities specially adapted for real-time communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/401Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
    • H04L65/4015Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference where at least one of the additional parallel sessions is real time or time sensitive, e.g. white board sharing, collaboration or spawning of a subconference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4112Peripherals receiving signals from specially adapted client devices having fewer capabilities than the client, e.g. thin client having less processing power or no tuning capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224Touch pad or touch panel provided on the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633Control signals issued by server directed to the network components or client
    • H04N21/6332Control signals issued by server directed to the network components or client directed to client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784Data processing by the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

移动终端及其控制方法。一种移动终端,即使限制输出在触摸屏上输出的再现画面,该移动终端也可以连续地提供与包括在从再现画面中选择的区域中的视频数据相对应的信息。所述移动终端包括:触摸屏,所述触摸屏被配置为输出与视频数据相对应的再现画面;用户输入单元,所述用户输入单元被配置为接收限制输出所述再现画面的用户输入;以及控制器,所述控制器被配置为:当接收到用户输入时,输出与包括在再现画面中的多个预设区域相关的列表信息,并且基于施加至所述列表信息的触摸,提取与选择的区域相对应的视频数据,其中,所述控制器可以随时间形成用于输出与提取的视频数据相对应的概要信息的控制命令。

Description

移动终端及其控制方法
技术领域
本公开涉及输出视频数据的移动终端及其控制方法。
背景技术
移动终端可以被配置为执行各种功能。这种移动终端的各功能例如可以包括数据和语音通信功能、捕获图像或视频的功能、语音存储功能、再现或播放音乐文件的功能以及显示图像或视频的功能。一些移动终端可以包括执行游戏的附加功能,而其它移动终端可以实现为多媒体设备。另外,最近的移动终端可以接收广播信号或多播信号以允许观看视频或电视节目。
正不断努力以支持和增加移动终端的功能。这种努力包括软件和硬件改进,以及结构部件的变化和改进。
移动终端可以在显示单元(或触摸屏)上输出各种类型的视觉信息。具体地,移动终端可以经由外部服务器或之前存储的视频数据输出实时流式传输的视频数据使得用户甚至可以经由移动终端观看期望的视频。
但是,由于输出图像随着时间流逝而不断变化,因此当用户不能经由移动终端连续地观看视频时,用户应当临时停止视频或终止其输出,并且然后,用户应当再次输出视频以观看该视频。
发明内容
因此,详细说明的一个方面提供了一种移动终端及其控制方法,该移动终端即使限制输出与视频数据相对应的再现画面,也能够连续地向用户提供与用户选择的再现画面的区域相关的视频数据信息。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体表达和广泛描述地,一种移动终端,该移动终端可以包括:触摸屏,所述触摸屏被配置为输出与视频数据相对应的再现画面;用户输入单元,所述用户输入单元被配置为接收限制输出所述再现画面的用户输入;以及控制器,所述控制器被配置为当接收到用户输入时,输出与包括在再现画面中的多个预设区域相关的列表信息,并且基于施加至所述列表信息的触摸,提取与选择的区域相对应的视频数据,其中,所述控制器可以随时间形成用于输出与提取的视频数据相对应的概要信息的控制命令。
在本公开的实施方式中,多个预设区域可以是与输出状态随时间变化的区域、基于输出再现画面时施加至触摸屏的触摸而设置的区域、以及输出特定视觉信息的区域中的至少一个区域相关的区域。
在本公开的实施方式中,所述移动终端还可以包括:通信单元,所述通信单元被配置为执行与外部终端的无线通信,其中,控制命令可以被形成为当限制输出再现画面时,从触摸屏和外部终端中的至少一个输出概要信息。
在本公开的实施方式中,所述控制器可以通过转换提取的视频数据的类型或通过改变与提取的视频数据相对应的视觉信息的属性来形成概要信息。
在本公开的实施方式中,概要信息可以是包括与提取的视频数据相对应的视觉信息的至少一部分的图形对象。
在本公开的实施方式中,控制器可以控制触摸屏从而当终止输出再现画面时,图形对象输出至选择的区域的位置并且具有与选择的区域的尺寸相对应的尺寸。
在本公开的实施方式中,当基于执行不同功能的请求而输出与不同于视频数据的功能的功能相对应的执行画面时,控制器可以控制触摸屏从而在与不同的功能相对应的执行画面上保持输出图形对象。
在本公开的实施方式中,控制器可以控制触摸屏从而基于预设时间段在不同功能的执行画面上输出图形对象或图形对象从不同功能的执行画面上消失。
在本公开的实施方式中,预设时间段可以是选择的区域的输出状态改变的时间段或发生与再现画面相关的预设事件的时间段。
在本公开的实施方式中,当特定的触摸施加至图形对象时,控制器可以从视频数据提取包括与施加特定触摸的时间点相对应的点的预定部分,并且控制触摸屏输出与提取的预定部分的视频数据相对应的再现画面。
在本公开的实施方式中,控制器可以控制无线通信单元将控制命令发送至外部终端,并且在发送控制命令之后,控制触摸屏显示与外部终端相对应的控制对象。
在本公开的实施方式中,控制器可以控制无线通信单元从而基于施加至控制对象的触摸将用于改变概要信息的输出状态的控制信号发送至外部终端。
在本公开的实施方式中,控制信号可以确定在外部终端中概要信息的输出时间段、概要信息的输出量以及概要信息的输出形式中的至少一个。
在本公开的实施方式中,控制器可以控制无线通信单元从而将用于输出与从多个预设区域中选择的第一区域相对应的概要信息的控制命令发送至外部终端,并且在发送用于输出与第一区域相对应的概要信息的控制命令之后,当特定触摸施加至控制对象时,控制器可以控制无线通信单元从而将用于输出与多个区域中与不同于第一区域的第二区域相对应的概要信息(而不是与第一区域相对应的概要信息)的控制信号发送至外部终端。
在本公开的实施方式中,移动终端还可以包括:相机,所述相机被配置为感测用户相对于触摸屏的眼睛,其中,当所述相机没有检测到用户相对于触摸屏的眼睛时,控制器可以控制无线通信单元从而将控制命令发送至外部终端。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体表达和广泛描述地,一种用于控制移动终端的方法,该方法包括以下步骤:在触摸屏上输出与视频数据相对应的再现画面;接收用于限制输出再现画面的用户输入;当接收到用户输入时,在触摸屏上输出与包括在再现画面中的多个预设区域相关的列表信息;提取与基于施加至列表信息触摸而选择的区域相对应的视频数据;并且随时间形成用于输出与提取的视频数据相对应的概要信息的控制命令。
在本公开的实施方式中,多个预设区域可以是与输出状态随时间变化的区域、基于输出再现画面时施加至触摸屏的触摸而设置的区域、以及输出特定视觉信息的区域中的至少一个区域相关的区域。
在本公开的实施方式中,控制命令可以被形成为在限制输出再现画面时,从触摸屏和执行与移动终端的无线通信的外部终端的至少一个输出概要信息。
在本公开的实施方式中,概要信息可以是形成为改变了与提取的视频数据相对应的属性信息的信息。
在本公开的实施方式中,概要信息可以是包括与提取的视频数据相对应的视觉信息的至少一部分的图形对象。
如上所述,在根据本公开的实施方式的移动终端及其控制方法中,即使当限制输出与视频数据相对应的再现画面,也能够向用户连续地提供包括在用户从再现画面中选择的感兴趣区域中的信息。
因此,即使在用户不能连续地再现视频数据的情况下,用户也可以连续地检查与再现画面的他或她感兴趣区域相关的信息。
本申请的适用性的其它范围通过下文给出的详细说明将变得更明显。但是,应理解,详细说明和特定示例在指示本发明优选实施方式的同时,仅通过例示的方式给出,因为对于本领域技术人员而言,在本发明的范围内的各种改变和修改通过详细说明将变得更明显。
附图说明
附图被包括进来以提供对本发明的进一步理解并被并入且构成本说明书的一部分,附图示出了实施方式并且与说明书一起用于解释本发明的原理。
在附图中:
图1A是根据本公开的移动终端的框图。
图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
图2是例示与本公开的另一实施方式相关的外部设备300的示例的立体图。
图3A是例示根据本公开的实施方式的移动终端的控制方法的流程图。
图3B和图3C是例示根据本公开的实施方式的移动终端的控制方法的图。
图4A、图4B和图4C是例示与确定特定区域相关的实施方式的图。
图5A、图5B和图5C是例示各种形式的概要信息的实施方式的图。
图6A、图6B和图6C是例示与在移动终端上输出概要信息的情况相关的实施方式的图。
图7A和图7B是例示在外部终端上输出概要信息的情况的实施方式的图。
图8A、图8B和图8C是例示与使用控制对象来控制在外部终端中的概要信息的输出状态相关的实施方式的图。
图9A和图9B是例示与基于施加至外部终端的输入来控制移动终端的输出状态相关的实施方式的图。
具体实施方式
现在将参照附图,根据本文公开的示例性实施方式详细给出描述。为了参照附图简要描述,可为相同或等同的组件提供相同的标号,其描述将不再重复。通常,诸如“模块”和“单元”的后缀可用于指代元件或组件。本文使用这种后缀仅是为了方便说明书的描述,后缀本身并非旨在给予任何特殊含义或功能。在本公开中,为了简明起见,相关领域的普通技术人员熟知的内容已被省略。使用附图来帮助容易地理解各种技术特征,应该理解,本文呈现的实施方式不受附图的限制。因此,本公开应该被解释为扩展至附图中具体示出的更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。
尽管可在本文中使用术语第一、第二等描述各种元件,但是这些元件不应当受这些术语的限制。这些术语一般仅用于将一个元件与另一个元件相区分。
当一个元件被称为“与”另一个元件“连接”时,该元件可以与另一个元件连接或中间元件也可以存在。相反,当一个元件被称为“与”另一个元件“直接连接”时,不存在中间元件。
单数表示可以包括复数表示,除非该单数表示根据上下文表示明确不同的含义。在本文中使用的诸如“包括”或“具有”的术语应当理解为它们旨在指示本说明书中公开的多个部件、功能或步骤的存在,并且还应当理解的是,同样可以使用更多或更少的部件、功能或步骤。
本文呈现的移动终端可利用各种不同类型的终端来实现。这些终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、石板PC、平板PC、超级本、可穿戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等。
仅通过非限制性示例,参照特定类型的移动终端进行进一步的描述。然而,这些教导同样适用于其它类型的终端,例如上述那些类型。另外,这些教导也可适用于诸如数字TV、台式计算机等的固定终端。
现在参照图1A至图1C,其中图1A是根据本公开的移动终端的框图,图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
移动终端100被示出为具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180和电源单元190的组件。将理解,不要求实现所示的所有组件,可另选地实现更多或更少的组件。
现在参照图1A,移动终端100被示出为具有利用多个通常实现的组件配置的无线通信单元110。例如,无线通信单元110通常包括允许移动终端100与无线通信系统或者移动终端所在的网络之间的无线通信的一个或更多个组件。
无线通信单元110通常包括允许通信(例如,移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端之间的通信、移动终端100与外部服务器之间的通信)的一个或更多个模块。另外,无线通信单元110通常包括将移动终端100连接到一个或更多个网络的一个或更多个模块。为了方便这些通信,无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置信息模块115中的一个或更多个。
输入单元120包括用于获得图像或视频的相机121、麦克风122(是用于输入音频信号的一种音频输入装置)以及用于使得用户能够输入信息的用户输入单元123(例如,触摸键、按键、机械键、软键等)。数据(例如,音频、视频、图像等)通过输入单元120来获得,并且可由控制器180根据装置参数、用户命令及其组合来分析和处理。
通常利用被配置为感测移动终端的内部信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现感测单元140。例如,在图1A中,感测单元140被示出为具有接近传感器141和照明传感器142。
如果需要,感测单元140可另选地或另外地包括其它类型的传感器或装置,例如触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池电量计、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器和气体传感器等)和化学传感器(例如,电子鼻、保健传感器、生物传感器等)等。移动终端100可被配置为利用从感测单元140获得的信息,具体地讲,从感测单元140的一个或更多个传感器获得的信息及其组合。
输出单元150通常被配置为输出各种类型的信息,例如音频、视频、触觉输出等。输出单元150被示出为具有显示单元151、音频输出模块152、触觉模块153和光学输出模块154。
为了方便触摸屏,显示单元151可具有与触摸传感器的中间层结构或集成结构。触摸屏可在移动终端100与用户之间提供输出接口,并且用作在移动终端100与用户之间提供输入接口的用户输入单元123。
接口单元160用作与可连接到移动终端100的各种类型的外部装置的接口。例如,接口单元160可包括任何有线或无线端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下,移动终端100可响应于外部装置连接到接口单元160而执行与连接的外部装置关联的各种控制功能。
存储器170通常被实现为存储用于支持移动终端100的各种功能或特征的数据。例如,存储器170可被配置为存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或指令等。这些应用程序中的一些应用程序可经由无线通信从外部服务器下载。其它应用程序可在制造或出厂时安装在移动终端100内,针对移动终端100的基本功能(例如,接电话、打电话、接收消息、发送消息等),通常是这种情况。常见的是,应用程序被存储在存储器170中,被安装在移动终端100中,并由控制器180执行以执行移动终端100的操作(或功能)。
除了与应用程序关联的操作以外,控制器180通常还用于控制移动终端100的总体操作。控制器180可通过处理经由图1A所描绘的各种组件输入或输出的信号、数据、信息等或者激活存储在存储器170中的应用程序来提供或处理适合于用户的信息或功能。作为一个示例,控制器180根据存储在存储器170中的应用程序的执行来控制图1A至图1C所示的一些或所有组件。
电源单元190可被配置为接收外部电力或提供内部电力,以便供应对包括在移动终端100中的元件和组件进行操作所需的适当电力。电源单元190可包括电池,所述电池可被配置为嵌入终端主体中,或者被配置为可从终端主体拆卸。
根据另外的实施方式,移动终端可被配置为能够穿戴在人体上的装置。这些装置超出用户使用其手来抓握移动终端的常规技术。可穿戴装置的示例包括智能手表、智能眼镜、头戴式显示器(HMD)等。
典型的可穿戴装置可与另一移动终端100交换数据(或者协作)。在这种装置中,可穿戴装置通常具有比协作的移动终端少的功能。例如,移动终端100的短距离通信模块114可感测或识别足够靠近以与移动终端通信的可穿戴装置。另外,当所感测的可穿戴装置是被验证为与移动终端100通信的装置时,控制器180可将移动终端100中处理的数据经由例如短距离通信模块114发送给可穿戴装置。因此,可穿戴装置的用户可在可穿戴装置上使用在移动终端100中处理的数据。例如,当在移动终端100中接收到呼叫时,用户可利用可穿戴装置来应答该呼叫。另外,当在移动终端100中接收到消息时,用户可利用可穿戴装置来查看所接收到的消息。
图2是示出根据另一示例性实施方式的手表型移动终端300的一个示例的立体图。如图2所示,手表型移动终端300包括具有显示单元351的主体301以及连接到主体301从而能够穿戴在腕部上的带单元302。通常,移动终端300可被配置为包括与图1A至图1C的移动终端100的特征相同或相似的特征。
主体301可包括具有特定外观的壳体。如图所示,所述壳体可包括第一壳体301a和第二壳体301b,这两个壳体协作地限定用于容纳各种电子组件的内部空间。其它配置也是可能的。例如,另选地,可实现单个壳体,这种壳体被配置为限定内部空间,从而利用单一体来实现移动终端300。
手表型移动终端300可执行无线通信,用于无线通信的天线可安装在主体301中。该天线可利用壳体来延伸其功能。例如,包含导电材料的壳体可电连接到天线,以延伸接地面积或辐射面积。
显示单元351被示出为位于主体301的前侧,使得用户可看到显示的信息。在一些实施方式中,显示单元351包括触摸传感器,使得显示单元可用作触摸屏。如图所示,窗口351a被设置在第一壳体301a上,以与第一壳体301a一起形成终端主体的前表面。
图示的实施方式包括设置在主体301上的音频输出模块352、相机321、麦克风322和用户输入单元323。当显示单元351被实现为触摸屏时,附加的功能键可被最小化或消除。例如,当实现触摸屏时,用户输入单元323可被省略。
带单元302通常穿戴在用户的腕部上,并且可由柔性材料制成以方便装置的穿戴。作为一个示例,带单元302可由毛皮、橡胶、硅、合成树脂等制成。带单元302还可被配置为可从主体301拆卸。因此,可根据用户的偏好来用各种类型的带单元替换带单元302。
在一个配置中,带单元302可用于延伸天线的性能。例如,带单元中可包括接地延伸部分(未示出),该接地延伸部分电连接到天线以延伸接地面积。
带单元302可包括系紧件302a。系紧件302a可被实现为扣环型、按扣钩结构、型等,并且包括柔性部分或材料。附图示出利用扣环实现系紧件302a的示例。
在根据本公开的实施方式的移动终端中,即使视频的再现画面的输出被限制,也可以将与再现画面的由用户指定为感兴趣区域的区域相对应的视频数据连续地提供给用户。
例如,在根据本公开的实施方式的移动终端中,可以从再现画面上的多个预设区域当中提取与用户选择的区域相对应的视频数据。另外,即使在终止输出再现画面之后,可以通过使用移动终端或无线连接至移动终端的外部终端来输出与提取的视频数据相对应的信息。
因此,在用户不能观看再现画面的情况下,可以给用户提供他或她能够连续检查关于用户感兴趣的再现画面的特定区域的信息的用户便捷性。
图3A是例示根据本公开的实施方式的移动终端的控制方法的流程图,并且图3B和图3C是例示根据本公开的实施方式的移动终端的控制方法的图。
首先,参照图3A,在步骤S301中,可以在根据本公开的实施方式的移动终端的触摸屏上输出与视频数据相对应的再现画面。
视频数据可以是包括随着时间流逝连续的多个图像的数据,并且可以利用各种类型的文件扩展名(例如,avi、wmv、mpg等)来形成。另外,视频数据可以是存储在移动终端100中的数据或可以是通过无线通信单元110从外部服务器实时流式传输的数据。
也就是,如图3B和图3C中的第一幅图所示,可以在触摸屏151上输出与基于从外部服务器接收的广播信号实时流式传输的视频数据(例如,关于棒球比赛的视频数据)相对应的再现画面10。
当存在用于输出视频数据的请求时,控制单元180可以控制触摸屏151输出随着时间流逝形成视频数据的多个图像。这里,与视频数据相对应的再现画面可以是与基于视频数据的再现而连续输出的多个图像当中的一个图像相对应的画面。
在输出再现画面的状态下,在步骤S302中可以接收用于限制再现画面的输出的用户输入。
可以通过用户输入单元接收用户输入。这里,用户输入单元可以包括用于接收从用户施加的控制命令的任何部件。
例如,可以在用户输入单元中包括用于施加从用户施加的触摸输入的触摸屏151、用于接收用户的语音命令的麦克风122、用于感测用户的手势的感测单元140等。
当接收到用户输入时,控制单元180可以限制再现画面的输出。这里,限制再现画面的输出可以指的是使再现画面的至少一个区域从触摸屏151消失或限制再现与再现画面相对应的视频数据。
在具体示例中,控制单元180可以以放大的方式基于用户输入来控制触摸屏151输出再现画面的至少一个区域并且使再现画面的其余区域从触摸屏151消失。
在另一示例中,控制单元180可以基于用户输入临时停止再现与再现画面相对应的视频数据,并且当停止再现视频数据时,控制触摸屏151保持输出在触摸屏151上输出的再现画面。
在另一示例中,基于用户输入,控制单元180可以控制触摸屏151基于用户输入终止视频数据的再现并且终止输出再现画面。
这里,用于限制再现画面的输出的用户输入可以被不同地设置为用于按压安装在移动终端100的主体中的硬件键的用户输入或用于经由麦克风122终止输出视频数据的语音输入。
另外,在示例中,如图3B中的第二幅图和图3C中的第一幅图所示,用户输入可以是施加至与终止输出与视频数据相对应的再现画面10的功能相对应的对象的触摸。
当接收到用户输入时,在步骤S303中,控制单元180可以控制触摸屏151输出关于包括在再现画面中的多个预设区域的列表信息。
这里,预设区域可以指的是在再现画面中可以被用户指定为感兴趣区域的区域类型。
例如,预设区域可以是在再现画面中输出状态随时间变化的区域。在具体示例中,预设区域可以是当再现视频数据时诸如字符或图像信息的视觉信息在再现画面中改变至少一次或更多次的区域。
也就是,如图3B中的第一幅图所示,控制单元180可以将在再现画面10中视觉信息随时间变化的区域确定为预设区域11和13。预设区域11和13可以是得分状态和投掷相关信息随棒球比赛进行而改变的区域。
在另一示例中,预设区域可以是在输出与视频数据相对应的再现画面时通过施加至触摸屏151的触摸而设置的区域。在更具体的示例中,在输出触摸画面的状态下,预设区域可以是再现画面的其分辨率基于触摸而改变的区域。也就是,在放大再现画面的区域的情况下,可以在基于触摸所设置的区域中包括一个区域。另选地,可以基于触摸在预设区域中包括基于再现画面的一个区域的放大率已经从触摸屏151消失的其余区域。
另外,在预设类型的触摸(例如,向外捏或拖拽输入、预设次数的轻击输入等)施加至再现画面的预定范围的情况下,与预定范围相对应的区域可以是基于触摸的预设区域。
在另一示例中,预设区域可以是当再现视频数据时输出特定信息的区域。在具体示例中,特定信息可以包括预设的特定类型信息(例如,文本信息或图像信息)或与预设对象相对应的视觉信息(不包括背景的个人或对象的图像、字符等)。
也就是,如图3B中的第二幅图所示,可以将在再现区域10中输出特定的视觉信息(SBS体育)的区域确定为预设区域。这里,在预设区域中,可以一致地保持输出特定视觉信息而不随时间变化。
以这种方式,当确定多个预设区域时,控制单元180可以控制触摸屏151输出关于多个预设区域的列表信息。
列表信息可以是包括分别与多个预设区域相对应的缩略图的列表画面。也就是,如图3B中的第三幅图所示,列表信息可以以包括分别与多个预设区域11、12和13相对应的缩略图的列表画面10a的形式输出。
另选地,列表信息可以输出为关于在再现画面上的多个预设区域中的每一个预设区域的标识显示信息。
也就是,如图3C中的第二幅画所示,通过将特定的视觉效果(例如,虚线的附图边界或具有预设亮度的阴影)施加至包括在再现画面10中的多个预设区域11、12和13中的每一个,列表信息可以被输出为标识显示信息。
在输出列表信息之后,在步骤S304中,控制单元180可以在多个预设区域中提取与基于施加至列表信息的触摸而选择的区域相对应的视频数据。
也就是,基于触摸,控制单元180可以选择多个预设区域中的至少一个,并且提取与选择的区域相对应的视频数据。这里,与选择的区域相对应的视频数据可以是随着再现视频数据与在选择的区域中输出的部分相对应的视频数据。
例如,与选择的区域相对应的视频数据可以包括在选择的区域上输出的任何类型的视觉信息(诸如字符或图像信息)。在具体示例中,在与选择的区域相对应的视频数据中可以包括在选择的区域上输出的标题信息、图形对象信息、商标信息等。
在另一示例中,与选择的区域相对应的视频数据可以包括与在特定区域中输出的视觉信息相关的任何类型的听觉信息。也就是,与视觉信息一起输出的听觉信息也可以包括在与选择的区域相对应的视频数据中。
另外,针对列表信息的触摸可以是用于选择多个预设区域中的至少一个预设区域的触摸。例如,该触摸可以是施加至包括在列表画面10a中的一个缩略图11的触摸,如图3B中的第三幅图所示。
另外,例如,如图3C中的第三幅图所示,触摸可以是施加至预设区域11的至少一部分11a的拖拽触摸。在这种情况下,只有与预设区域11的至少一部分11a相对应的视频数据可以被提取。
以这种方式,在提取与选择的区域相对应的视频数据之后,在步骤S305中,控制单元180可以形成用于随时间输出与提取的视频数据相对应的概要信息的控制命令。
概要信息可以是当再现视频数据时与视觉信息的至少一部分相对应的信息和在选择的区域中随时间输出的听觉信息,该听觉信息可以通过提取的视频数据的至少一部分来形成。控制单元180可以通过使用与提取的视频数据相对应的属性信息来形成概要信息。
例如,控制单元180可以通过改变与提取的视频数据相对应的属性信息来形成概要信息。
在具体示例中,控制单元180可以通过将与提取的视频数据相对应的文件扩展名改变成不同的文件扩展名来形成概要信息。在另一个示例中,控制单元180可以通过将与提取的视频数据相对应的数据类型转变成不同的数据来形成概要信息。也就是,控制单元180可以通过将包括在提取的视频数据中的视觉信息转变成听觉信息来形成概要信息。
另外,控制单元180可以通过改变与提取的视频数据相对应的视觉信息的属性来形成概要信息。例如,控制单元180可以形成包括与提取的视频数据相对应的视觉信息的至少一部分的图形对象,作为概要信息。
在另一个示例中,在与提取的视频数据相对应的视觉信息是图像信息的情况下,控制单元180可以通过使用形成图像信息的图像的一部分的静态切割图像来形成概要信息。
在另一个示例中,控制单元180可以通过改变与提取的视频数据相对应的图像信息的分辨率或通过将与提取的视频数据相对应的文本信息改变成图像信息来形成概要信息。
在下文中,将参照图5A、图5B和图5C描述与提取的视频数据相对应的概要信息相关的实施方式。
当以这种方式形成概要信息时,当在触摸屏151上限制输出再现画面时,控制单元180可以随时间生成用于输出概要信息的控制命令。
具体地,当限制输出再现画面时,控制命令可以形成为在触摸屏151和执行与移动终端100无线通信的外部终端中的至少一个上输出概要信息。
另外,控制命令可以形成为确定在触摸屏151和外部终端的至少一个中的概要信息的输出尺寸、范围、位置和输出时间段。
例如,当与从任一预设区域11提取的视频数据相对应的概要信息形成为如图3B中的第三幅图所示时,控制单元180可以在触摸屏151上形成用于输出概要信息的控制命令,如图3B中的第四幅图所示。这里,控制命令可以形成为使概要信息能够以浮动图形对象的形式在触摸屏151上输出。
在另一示例中,控制命令可以是用于控制无线通信单元110执行与预设外部终端的无线通信的命令。也就是,如图3C中的第四幅图所示,当任意一个预设区域11的一部分11a被指定且预设输入(例如,双击输入)被施加至触摸屏151时,控制单元180通过使用从部分11a提取的视频数据可以将形成的概要信息发送至外部终端300。这里,概要信息可以是通过改变与从部分11a提取的视频数据相对应的视觉信息的属性而获得的信息,并且可以输出在显示单元351上。
以这种方式,即使限制再现画面的输出,在再现画面中与通过用户指定为感兴趣区域的区域相对应的视频数据也可以经由相同终端或外部终端中的至少一个被提供给用户。因此,即使终止输出再现画面,也可以在再现画面的选择区域中随时间给用户连续地提供与视频数据相对应的信息。
另外,当满足预设条件时,控制单元180可以选择多个预设区域中的至少一个预设区域。这里,预设条件可以与施加至关于多个预设区域的列表信息的触摸和输出状态随时间改变的区域以及预设区域的特定输出状态(例如,包括在预设区域中的视觉信息的特定分辨率、在预设区域中输出的特定视觉信息的输出时间等)中的至少一个相关。下文将参照图4A、图4B和图4C描述与其相关的实施方式。
图4A、图4B和图4C是例示与特定区域的确定相关的实施方式。
首先,参照图4A,可以在触摸屏151上输出与基于从外部服务器接收的广播信号实时流式传输的视频数据相对应的再现画面10。控制单元180可以在再现画面10中确定多个预设区域。
多个预设区域可以包括输出状态随时间改变的区域。在这种情况下,控制单元180可以在输出状态随时间改变的区域当中将具有等于或小于预设基准的分辨率的区域确定为选择区域(也就是,由用户指定为感兴趣区域的区域)。
也就是,如图4A所示,当棒球比赛的画面输出为再现画面时,可以在多个预设区域中包括显示关于棒球比赛的得分信息的区域、与投掷信息相关的区域等。在这种情况下,控制单元180可以在多个预设区域当中将具有等于或小于预设基准的分辨率的区域11确定为选择的区域。
在另一示例中,参照图4B,可以在触摸画面151上输出与特定视频数据相对应的再现画面30。控制单元180可以从包括在再现画面30中的多个预设区域中选择特定对象信息(字符、不包括背景的人或对象的图像等)的区域。
也就是,如图4B所示,可以将在再现画面30的区域中输出与特定字符对象相对应的标题信息31的区域确定为选择的区域。
另选地,如图4C所示,当特定的触摸由用户施加至再现画面10时,针对再现画面10的至少一个区域的输出会被特定触摸所限制。例如,基于放大再现画面10的一个区域10b的特定触摸,再现画面10的其余区域可以从触摸屏151消失。另外,由于该一个区域被放大,其可以被输出为具有与原始输出分辨率不同的分辨率。
在这种情况下,在从触摸屏151消失的其余区域中,控制单元180可以将输出状态随时间变化的区域11和12确定为选择的区域。另选地,控制单元180可以将其分辨率基于由用户施加的特定触摸而改变的区域确定为选择的区域10b。
以这种方式,控制单元180可以基于预设条件在包括在再现画面中的多个预设区域当中立刻选择用户感兴趣的区域。因此,用户可以在限制输出再现画面时直接指定期望的区域,或用户可以事先登记预设条件,并且可以快速并容易地提供与用户感兴趣区域相关的信息。
另外,当确定选择的区域时,控制单元180可以通过使用从选择的区域提取的视频数据来形成与选择的区域相对应的概要信息。也就是,控制单元180可以通过使用与提取的视频数据相对应的元数据来改变提取的视频数据的属性,以形成概要信息。
图5A、图5B和图5C是例示关于各种形式的概要信息的实施方式的图。
首先,参照图5A,可以将在触摸屏151上输出的再现画面40的输出一个对象41的区域确定为选择的区域。在这种情况下,控制单元180可以通过在从选择的区域提取的视频数据当中使用与一个对象相关的视频数据来形成概要信息。
例如,控制单元180通过使用与一个对象相关的视频数据可以随时间形成多个静态切割图像。另外,控制单元180通过使用与提取的视频数据中与该对象相关的视频数据的一部分来形成部分流数据。
另外,控制单元180可以形成用于输出形成的概要信息的控制命令,以在外部终端300的显示单元351上输出与对象相关的概要信息。
另外,如图5B所示,当在再现画面30的一个区域31中的输出状态连续改变的区域(例如,输出标题信息的区域)被确定为选择的区域时,控制单元180可以从选择的区域31提取视频数据。另外,控制单元180可以改变与从选择的区域31提取的视频数据相对应的视觉信息的属性。
例如,在视觉信息形成为与特定标题内容相对应的图像信息的情况下,控制单元180可以提取与图像信息相对应的标题内容并且使用标题信息将字符信息形成为概要信息。因此,可以在外部终端300的显示单元351上输出与标题信息相对应的字符信息。
在另一示例中,如图5C所示,控制单元180可以在经由外部服务器实时流式传输的视频数据当中提取与选择的区域11相对应的视频数据。另外,控制单元180可以通过改变与提取的视频数据11相对应的视觉信息的属性来形成与视觉信息相对应的听觉信息。可以在外部终端300上输出听觉信息。
以这种方式,控制单元180通过改变提取的视频数据的属性可以以适合于移动终端100或外部终端300的当前状态的形式来输出概要信息。
在下文中,将描述与在移动终端100或外部终端300上输出概要信息的情况相关的实施方式。
图6A、图6B和图6C是例示与在移动终端上输出概要信息的情况相关的实施方式的图。
首先,参照图6A,基于施加至从在触摸屏151上输出的再现画面10选择的区域11的预设类型的触摸,可以从选择的区域11提取视频数据。另外,控制单元180通过使用提取的视频数据可以形成概要信息。例如,概要信息可以是包括与在选择的区域上输出的视频数据相对应的视觉信息的至少一部分的图形对象。
当形成概要信息时,控制单元180可以形成用于输出概要信息的控制命令。控制命令可以确定诸如概要信息的输出时间段、输出方案等的概要信息的输出状态。例如,如图6A中的第二幅图所示,控制命令可以是能在与选择的区域相对应的位置输出概要信息11使得概要信息11具有与在触摸屏151中的选择区域相同的尺寸的命令。
另外,控制命令可以确定输出状态使得概要信息11的输出保持在触摸屏151的一个区域中。如图6A中的第二幅图所示,即使当再现画面10的输出终止并且在触摸屏151上输出主画面页面20时,也可以保持概要信息11的输出。
另外,如图6A中的第三幅图所示,基于执行与对应于视频数据的功能不同的功能的请求,控制单元180可以在触摸屏151上输出与不同的功能相对应的执行画面2a。另外,在输出与不同的功能相对应的执行画面2a的状态下,控制单元180可以控制触摸屏151从而保持概要信息11的输出。
然后,当基于施加至触摸屏151的触摸而保持特定应用的执行时,如图6A中的第四幅图所示,可以在特定应用的执行画面2a上以浮动的方式保持概要信息的输出。
另外,控制单元180可以控制触摸屏151从而基于预设时间段输出概要信息或使概要信息消失。也就是,参照图6B,控制单元180可以在不同功能的执行画面2a上形成用于确定概要信息11a的输出时间段的控制命令。
这里,预设时间段可以与选择区域的输出状态改变的时间段和与再现画面相关地发生预设事件的时间段中的至少一个时间段相关。在更具体的示例中,控制单元180可以形成控制命令,使得基于与选择的区域相对应的视觉信息的输出变化来输出概要信息。
在另一个示例中,在预设的特定信息(例如,特定的标题信息或与再现画面相关的广告信息)被输出在再现画面上的情况下或在再现画面处于预设的输出状态(例如,分辨率改变、临时停止的状态等)的情况下,控制单元180可以确定预设事件已经发生。
以这种方式,当确定预设时间段时,控制单元180可以基于预设时间段来控制概要信息的输出状态。因此,如图6B中的第一幅图所示,在输出概要信息11a的状态下,随着时间流逝,在执行不同的功能时,概要信息可以从触摸屏151消失,如图6B中的第二幅图和第三幅图所示。
另外,当视觉信息的与特定区域相对应的输出状态改变时,可以在不同功能的执行画面2a上再次输出与改变的输出状态相对应的视觉信息11b。
以这种方式,由于在预设条件下输出概要信息,因此用户可以在不受干扰的情况下执行不同的功能,并且只有在选择的与概要信息相对应的区域的输出状态改变的特定情况下,用户才可以再次检查输出的概要信息。
另外,在输出概要信息的状态下,控制单元180可以提供与视频数据部分相关的再现画面,该视频数据部分与施加特定触摸的时间点相关。
也就是,参照图6C,在概要信息输出在与在触摸屏151上输出的不同功能相对应的执行画面2a上的状态下,特定触摸(例如,施加的超过预设时间段的长触摸等)可以被施加至概要信息11b,如图6C中的第二幅图所示。
在这种情况下,控制单元180可以从视频数据提取包括与施加了特定触摸的时间点相对应的点的预定部分。例如,在视频数据是基于从外部服务器接收的广播信号实时流式传输的视频数据的情况下,控制单元180可以提取包括与施加了特定触摸的点相对应的点的部分的流式传输的视频数据。
另外,如图6C中的第三幅图所示,在保持特定的触摸时,控制单元180可以控制触摸屏151输出与预定的提取部分的视频数据相对应的再现画面10c。例如,可以在不同功能的执行画面2c上以交叠的方式输出与预定的提取部分的视频数据相对应的再现画面10c。
因此,可以给用户提供其输出状态在再现画面的至少一个区域中被改变的概要信息,并且当用户向概要信息施加特定的触摸时,可以容易地给用户提供与概要信息相关的全部视觉信息。
另外,控制单元180可以形成控制命令,使得可以在与移动终端100无线连接的外部终端上输出概要信息。
图7A和图7B是例示在外部终端上输出概要信息的情况的实施方式的图。
首先,参照图7A,在触摸屏151上输出再现画面10,并且当输入对再现画面10的至少一个区域的输出的限制时,可以输出与至少一个区域相关的列表信息10’。控制单元180可以控制触摸屏151将对象14和15与列表信息10’一起显示,该对象14和15指示用于输出与从列表信息中选择的区域相对应的概要信息的外部终端。
这里,如图7A中的第二幅图所示,在施加至与包括在列表信息10’中的一个区域相对应的缩略图的输入被连续地施加至任一外部终端的对象14的情况下,控制单元180可以形成控制命令,该控制命令用于在与对象14相对应的外部终端上输出与一个区域相对应的概要信息。具体地,控制命令可以是基于从一个区域提取的视频数据形成概要信息并且控制与外部终端无线连接的无线通信单元110发送概要信息的命令。
然后,当释放触摸时,控制单元180可以控制触摸屏151终止输出再现画面10。另外,可以基于控制命令在外部终端300的显示单元351上输出概要信息11’。
以这种方式,即使终止输出再现画面,控制单元180也可以将在选择的区域中输出的视频数据随时间发送至无线连接至移动终端的外部终端300。因此,在无法使用移动终端100的情况下,可以经由外部终端300(例如,可以被穿戴在用户身体的至少一部分上的可穿戴终端)给用户连续地提供关于选择的区域的信息。
另外,控制单元180可以基于预设条件将与选择的区域相对应的概要信息发送至外部终端。
也就是,参照图7B,移动终端100可以包括能够在触摸屏151上输出再现画面时检测用户是否观看再现画面的传感器(例如,相机121)。当在触摸屏151上输出再现画面10时,控制单元180通过使用相机121可以针对再现画面10感测用户的眼睛并且分析用户眼睛的检测数据。
如图7B中的第二幅图所示,如果相机121没有检测到用户眼睛,则控制单元180可以基于用户眼睛的检测数据将概要信息发送至外部终端300。也就是,如图7B中的第三幅图所示,可以在外部终端300的显示单元351上输出与选择的区域11相对应的概要信息11’。
虽然没有示出,但是当没有检测到用户眼睛时,控制单元180可以以这种方式存储与选择的区域相对应的概要信息。另外,控制单元180可以将概要信息与用户眼睛的检测数据一起发送至外部终端。因此,即使当用户在没有施加用于限制关于再现画面的至少一个区域的输出的输入的状态下不能观看再现画面时,也可以给用户提供便利来检查关于与选择的区域相关地形成的概要信息的内容。
另外,在概要信息被发送至外部终端的情况下,控制单元180可以在触摸屏151上输出用于控制外部终端中的概要信息的输出状态的控制对象。另外,基于施加至控制对象的触摸,控制单元180可以向外部终端发送用于确定概要信息的输出状态的控制信号。例如,控制信号可以确定概要信息的输出周期、概要信息的输出量以及概要信息的输出形式中的至少一个。
图8A、图8B和图8C是例示与使用控制对象来控制外部终端中的概要信息的输出状态相关的实施方式的图。
首先,参照图8A,当预设输入施加至从触摸屏151上输出的再现画面10选择的区域11时,控制单元180可以从选择的区域11提取视频数据。另外,控制单元180可以形成与提取的视频数据相对应的概要信息,并且然后形成用于将概要信息发送至外部终端300的控制命令。
当在外部终端300上基于控制命令输出概要信息11’时,控制单元180可以控制触摸屏151在触摸屏151上输出与外部终端300相对应的控制对象3,如图8A中的第二幅图所示。另外,控制单元180可以基于施加至控制对象3的触摸来控制外部终端300中的概要信息11’的输出状态。
例如,如图8A中的第三幅图所示,当沿预设方向(例如,逆时针方向)继续将拖拽触摸施加至控制对象3时,概要信息11’的输出时间段可以被设置为与施加拖拽触摸的程度相对应。另外,可以在控制对象3上输出关于输出时间段的信息3a。
当以这种方式基于施加至控制对象3设置输出时间段时,控制单元180可以控制无线通信单元110将包括关于输出时间段的信息的控制信号发送至外部终端300。因此,可以在外部终端300上输出在经过输出时间段10T之后从之前输出的概要信息11’改变的概要信息11’a。
在另一个示例中,控制单元180可以基于施加至控制对象的触摸来改变选择的区域并且将与改变的区域相对应的概要信息发送至外部终端。
也就是,当从包括在再现画面中的多个预设区域中选择第一区域时,控制单元180可以形成用于将与从第一区域提取的视频数据相对应的概要信息发送至外部终端的控制命令。另外,当特定的触摸被施加至控制对象时,控制单元180可以控制无线通信单元110向外部终端发送用于输出与多个预设区域中与第一区域不同的第二区域相对应的概要信息的控制信号,而不是与第一区域相对应的概要信息的控制信号。
例如,参照图8B,在外部终端300上输出与触摸屏151中的一个区域11相对应的概要信息11’,并且可以在触摸屏151的一个区域中输出与外部终端300相对应的控制对象3。
然后,如图8B中的第二幅图所示,当特定触摸施加至再现画面10中与一个区域11不同的区域13和控制对象3时,控制单元180可以将不同的区域13改变和设置为选择的区域。
另外,控制单元180可以向外部终端300发送用于输出与从不同的区域提取的视频数据相对应的概要信息的控制信号,而不是与从一个区域11提取的视频数据相对应的概要信息的控制信号。
因此,如图8B中的第三幅图所示,可以在外部终端300上输出与从不同的区域13提取的视频数据相对应的概要信息13’。另外,控制单元180可以控制触摸屏151使得选择的区域和改变的区域区分开。
也就是,如图8B中的第一幅图所示,当一个区域11被确定为选择的区域时,控制单元180可以控制触摸屏151将一个区域11在再现画面中不同地显示(例如,提供视觉效果使得一个区域11被包围在虚线中)。然后,当选择的区域从一个区域11改变为不同的区域13时,控制单元180可以控制触摸屏151在再现画面10中不同地显示不同的区域13,如图8B中的第三幅图所示。
另外,控制器180可以基于施加至控制对象的触摸而临时地停止发送概要信息。也就是,如图8C中的第一幅图所示,在从控制对象3沿朝向触摸屏151的边缘的方向施加触摸的情况下,控制单元180可以停止形成控制命令从而停止发送概要信息。
在这种情况下,可以停止在外部终端300的显示单元351上输出从移动终端100接收的概要信息,并且如图8C中的第二幅图所示,可以显示与移动终端相对应的对象4。
然后,如图8C中的第二幅图所示,当沿从触摸屏151的边缘区域中缩小的控制对象3朝向触摸屏151的中心的方向施加触摸时,控制单元180可以通过使用从选择的区域11提取的视频数据再次形成控制命令。
因此,如图8C中的第三幅图所示,可以在外部终端300上再次输出与从选择的区域11提取的视频数据相对应的概要信息11’。
以这种方式,由于外部给移动终端提供用于控制概要信息的输出状态的控制对象,因此用户可以经由移动终端容易地控制概要信息的输出状态。
另外,在概要信息被输出在外部终端上的情况下,可以基于施加至外部终端的输入来控制移动终端的输出状态。
图9A和图9B是例示与基于施加至外部终端的输入来控制移动终端的输出状态相关的实施方式的图。
首先,参照图9A,控制单元180可以将再现画面10中的多个区域确定为选择的区域,并且可以向外部终端300发送与分别从多个区域提取的视频数据相对应的多条概要信息。在这种情况下,可以在外部终端300的显示单元351上输出分别与多个区域11、12和13相对应的多条概要信息11’、12’和13’。
在这种状态下,如图9A中的第二幅图所示,在预设触摸施加至任一概要信息11’的情况下,外部终端300可以基于预设触摸向移动终端100发送用于解除与概要信息相关的选择的区域的设置的控制命令。
在这种情况下,如图9A中的第三幅图所示,可以在外部终端300中终止输出已经施加了预设触摸的概要信息11’。另外,基于接收到控制命令,控制单元180可以通过使用包括在控制命令中的概要信息来解除针对多个区域11、12和13中的一个区域11的选择区域的设置。另外,控制单元180可以控制触摸屏151,使得一个区域11的区别的显示从触摸屏151消失。
以这种方式,控制单元180可以根据基于在外部终端300中施加的触摸而接收的控制命令来解除或改变在移动终端100中的选择区域的设置。因此,用户可以通过对外部终端300施加各种输入来选择或改变在移动终端100上输出的再现画面的至少一个区域当中的他或她期望的区域。
另外,当在外部终端中选择特定的概要信息时,控制单元180可以控制触摸屏151从而在触摸屏151上输出与特定的概要信息相对应的再现画面。
也就是,参照图9B,在触摸屏151上输出与一个视频数据相对应的再现画面32a,并且在再现画面32a中可以将视觉信息(例如,标题信息)随时间改变的区域设置为选择的区域33。
另外,控制单元180可以控制无线通信单元110使得与选择的区域33中随时间输出的视觉信息相对应的概要信息(例如,与标题内容相对应的文本信息)被发送至外部终端300。因此,可以在外部终端300的显示单元351上输出随时间连续发送的多条概要信息33a、33b和33c。
另外,可以在多条概要信息33a、33b和33c中的每一条概要信息中显示与用户的状态相关的信息34。这里,与用户的状态相关的信息可以是诸如指示用户是否观看的用户眼睛检测数据信息这样的信息或指示特定的触摸(例如,用于检查特定信息的触摸输入)是否已经施加至在外部终端300上输出的概要信息这样的信息。
在这种状态下,如图9B中的第二幅图所示,在用户的特定触摸施加至在外部终端300上输出的多个概要信息33a、33b和33c中的一条概要信息33a的情况下,外部终端300可以向移动终端100发送请求输出与一条概要信息33a相对应的视频数据的命令。
因此,基于接收到输出请求命令,移动终端100可以控制触摸屏151从而在一个再现画面32b中输出与输出请求命令相对应的再现画面32a,如图9B中的第二幅图所示。
另外,当在移动终端100中改变再现画面的输出状态时,可以在外部终端300中不输出用户的与一个概要信息33a相关的状态信息。
以这种方式,当已经经由外部终端接收到概要信息的用户希望输出与任一概要信息相关的特定视频数据时,可以经由更大的屏幕提供视频数据。
如上所述,在根据本公开的实施方式的移动终端及其控制方法中,即使在限制与视频数据相对应的再现画面的输出时,也可以向用户连续提供包括在由用户从再现画面中选择的感兴趣区域中的信息。
因此,即使在用户不能连续地再现视频数据的情况下,用户也可以连续地检查与再现画面的他或她感兴趣区域相关的信息。
以上描述中提到的本发明可利用存储有指令的机器可读介质来实现,所述指令由处理器执行以执行本文所呈现的各种方法。可能的机器可读介质的示例包括HDD(硬盘驱动器)、SSD(固态盘)、SDD(硅磁盘驱动器)、ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置、本文所呈现的其它类型的存储介质及其组合。如果期望,机器可读介质可按照载波的形式实现(例如,经由互联网的传输)。处理器可包括移动终端的控制器180。
以上实施方式仅是示例性的,并且不被认为限制本公开。本说明书旨在是说明性的,而不是限制权利要求的范围。对于本领域技术人员而言,许多替代、修改和变型将是显而易见的。在此描述的示例性实施方式的特征、结构、方法和其它特性可以按照各种方式组合以获得另外的和/或另选的示例性实施方式。
由于在不脱离本发明的特性的情况下,本发明的特征可以按照多种形式来具体实现,所以还应该理解,除非另外指明,否则上述实施方式不受以上描述的任何细节限制,而是应该在所附权利要求书中所限定的范围内广义地理解,因此,落入权利要求的范围及其等同范围内的所有改变和修改因此旨在被所附的权利要求书涵盖。

Claims (20)

1.一种移动终端,该移动终端包括:
触摸屏;
用户输入单元;以及
控制器,所述控制器被配置为使所述触摸屏:
显示与视频数据相对应的图像,所述图像包括多个区域,其中,所述多个区域包括预设区域或由用户设置的区域中的至少一个;
当显示所述图像时,响应于经由所述用户输入单元接收的用户输入,显示包括与所述多个区域中的一个区域单独地对应的项目的列表;
响应于选择所述列表中与所述多个区域中的一个区域相对应的项目,终止显示所述图像;并且
在终止显示所述图像之后,显示针对所述一个区域的概要信息。
2.根据权利要求1所述的移动终端,其中:
当显示所述图像时,通过基于从外部服务器接收的广播信号实时流式传输视频数据来生成所述图像;并且
当显示所述概要信息时,实时更新所述概要信息。
3.根据权利要求1所述的移动终端,该移动终端还包括无线通信单元,其中,所述控制器还被配置为:
使所述无线通信单元与外部终端通信;并且
当不在所述触摸屏上显示所述图像时,使所述外部终端显示所述概要信息。
4.根据权利要求3所述的移动终端,其中,所述控制器还被配置为:当显示所述列表时并且在所述外部终端处显示所述概要信息之前,使所述触摸屏显示代表所述外部终端的对象。
5.根据权利要求4所述的移动终端,其中,所述控制器还被配置为:响应于施加至所述对象的触摸,使所述无线通信单元向所述外部终端发送用于显示所述概要信息的控制信号。
6.根据权利要求5所述的移动终端,其中,所述控制器还被配置为:当在所述外部终端处显示所述概要信息时,使所述触摸屏终止显示所述概要信息。
7.根据权利要求5所述的移动终端,其中,所述控制器还配配置为:
使所述无线通信单元向所述外部终端发送用于显示与从所述多个区域中选择的第一区域相对应的概要信息的第一控制信号;并且
当在所述外部终端处显示与所述第一区域相对应的所述概要信息时,使所述无线通信单元响应于施加至所述对象和从所述多个区域中选择的第二区域的触摸向所述外部终端发送用于显示与所述第二区域相对应的概要信息的第二控制信号,而不是所述第一控制信号。
8.根据权利要求3所述的移动终端,所述移动终端还包括相机,
其中,所述控制器还被配置为:当所述相机没有检测到所述用户的眼睛时,使所述无线通信单元向所述外部终端发送用于显示所述概要信息的控制信号,从而在所述外部终端处显示所述概要信息。
9.根据权利要求1所述的移动终端,其中,所述控制器还被配置为至少通过以下各项来生成所述概要信息:
提取与对应于选择的所述项目的所述一个区域相对应的所述视频数据的一部分;或
改变与所述视频数据的提取的所述一部分相对应的视觉信息的属性。
10.根据权利要求9所述的移动终端,其中:
所述概要信息包括图形对象,所述图形对象包括所述视觉信息的至少一部分;并且
所述概要信息的内容能够根据响应于经由所述触摸屏接收的触摸输入而改变的所述一个区域的尺寸而改变。
11.根据权利要求10所述的移动终端,其中,所述控制器还被配置为:使所述触摸屏在所述触摸屏上的与所述图像中的所述一个区域的位置相对应的位置处显示所述图形对象,在不显示所述图像时所述图形对象的被显示的尺寸与所述一个区域的尺寸相对应。
12.根据权利要求10所述的移动终端,其中,所述控制器还被配置为:
在不显示所述图像时执行第一功能;
使所述触摸屏显示与执行的所述第一功能相对应的第一执行画面,从而在所述第一执行画面上显示所述图形对象;
在不显示所述图形时执行第二功能;并且
当所述第一执行画面改变为与执行的所述第二功能相对应的第二执行画面时,使所述触摸屏在所述第二执行画面上继续显示所述图形对象。
13.根据权利要求12所述的移动终端,其中,所述控制器还被配置为:基于预设时间段控制所述图形对象的显示,从而在显示所述第一执行画面或所述第二执行画面时,周期性地显示或不显示所述图形对象。
14.根据权利要求13所述的移动终端,其中,所述控制器还被配置为:在显示所述第一执行画面或所述第二执行画面并且不显示所述图形对象时,当所述概要信息改变时使所述触摸屏再次显示所述图形对象,再次显示的所述图形对象包括与之前显示的图形对象的内容不同的内容。
15.根据权利要求10所述的移动终端,其中,所述控制器还被配置为:响应于施加至所述图形对象的触摸输入使所述触摸屏再次显示所述图像,再次显示的所述图像对应于所述视频数据的在施加所述触摸输入的时间点实时再现的部分。
16.一种用于控制移动终端的方法,该方法包括以下步骤:
在触摸屏上显示与视频数据相对应的图像,所述图像包括多个区域,其中,所述多个区域包括预设区域或由用户设置的区域中的至少一个;
当显示所述图像时,响应于经由用户输入单元接收的用户输入,显示包括与所述多个区域中的一个区域单独地对应的项目的列表;
响应于选择所述列表中与所述多个区域中的一个区域相对应的项目,终止显示所述图像;并且
在终止显示所述图像之后,显示针对所述一个区域的概要信息。
17.根据权利要求16所述的方法,其中:
当显示所述图像时,通过基于从外部服务器接收的广播信号实时流式传输视频数据来生成所述图像;并且
当显示所述概要信息时,实时更新所述概要信息。
18.根据权利要求16所述的方法,该方法还包括以下步骤:
经由无线通信单元与外部终端通信;以及
当不在所述触摸屏上显示所述图像时,使所述外部终端显示所述概要信息。
19.根据权利要求16所述的方法,其中,所述概要信息是至少通过以下各项而生成的信息:
提取与对应于选择的所述项目的所述一个区域相对应的所述视频数据的一部分;或
改变与所述视频数据的提取的所述一部分相对应的视觉信息的属性。
20.根据权利要求19所述的方法,其中:
所述概要信息包括图形对象,所述图形对象包括所述视觉信息的至少一部分;并且
所述概要信息的内容能够根据响应于经由所述触摸屏接收的触摸输入而改变的所述一个区域的尺寸而改变。
CN201610647576.6A 2015-08-11 2016-08-09 移动终端及其控制方法 Active CN106454499B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0113434 2015-08-11
KR1020150113434A KR102364085B1 (ko) 2015-08-11 2015-08-11 이동 단말기 및 그것의 제어방법

Publications (2)

Publication Number Publication Date
CN106454499A true CN106454499A (zh) 2017-02-22
CN106454499B CN106454499B (zh) 2019-06-04

Family

ID=56693924

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610647576.6A Active CN106454499B (zh) 2015-08-11 2016-08-09 移动终端及其控制方法

Country Status (4)

Country Link
US (1) US9788074B2 (zh)
EP (1) EP3131254B1 (zh)
KR (1) KR102364085B1 (zh)
CN (1) CN106454499B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111988656A (zh) * 2020-07-28 2020-11-24 烽火通信科技股份有限公司 一种流媒体视频用户触摸信息传递的方法及系统

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10238949B2 (en) * 2016-07-22 2019-03-26 Joe Martin Ploegman System and method for displaying a baseball batter count
WO2018072459A1 (zh) * 2016-10-18 2018-04-26 华为技术有限公司 一种屏幕截图和读取的方法及终端
CN109218834A (zh) * 2017-06-30 2019-01-15 武汉斗鱼网络科技有限公司 一种直播列表浏览交互方法及装置
CN107465831A (zh) * 2017-09-01 2017-12-12 山东荣安电子科技有限公司 一种基于手机应用的环控系统
US10732826B2 (en) * 2017-11-22 2020-08-04 Microsoft Technology Licensing, Llc Dynamic device interaction adaptation based on user engagement
CN108683936B (zh) * 2018-05-15 2020-12-11 杭州橙鹰数据技术有限公司 一种数据同步的方法、装置、终端、服务器及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070229706A1 (en) * 2006-03-28 2007-10-04 Junichiro Watanabe Information reading apparatus
WO2009122372A2 (en) * 2008-04-04 2009-10-08 Koninklijke Philips Electronics N.V. A display managing system
CN103081497A (zh) * 2010-07-26 2013-05-01 Lg电子株式会社 操作图像显示设备的方法
US20130155325A1 (en) * 2011-12-16 2013-06-20 General Instrument Corporation Region of interest selection, decoding and rendering of picture-in-picture window
WO2015031802A1 (en) * 2013-08-30 2015-03-05 Skreens Entertainment Technologies, Inc. Video display system
WO2015048457A1 (en) * 2013-09-30 2015-04-02 Qualcomm Incorporated Method and apparatus for real-time sharing of multimedia content between wireless devices

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101194505B (zh) * 2005-03-30 2016-09-14 乐威指南公司 用于富视频导航的系统和方法
JP2007184728A (ja) * 2006-01-05 2007-07-19 Sharp Corp 携帯情報端末装置
US9743119B2 (en) * 2012-04-24 2017-08-22 Skreens Entertainment Technologies, Inc. Video display system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070229706A1 (en) * 2006-03-28 2007-10-04 Junichiro Watanabe Information reading apparatus
WO2009122372A2 (en) * 2008-04-04 2009-10-08 Koninklijke Philips Electronics N.V. A display managing system
CN103081497A (zh) * 2010-07-26 2013-05-01 Lg电子株式会社 操作图像显示设备的方法
US20130155325A1 (en) * 2011-12-16 2013-06-20 General Instrument Corporation Region of interest selection, decoding and rendering of picture-in-picture window
WO2015031802A1 (en) * 2013-08-30 2015-03-05 Skreens Entertainment Technologies, Inc. Video display system
WO2015048457A1 (en) * 2013-09-30 2015-04-02 Qualcomm Incorporated Method and apparatus for real-time sharing of multimedia content between wireless devices

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111988656A (zh) * 2020-07-28 2020-11-24 烽火通信科技股份有限公司 一种流媒体视频用户触摸信息传递的方法及系统

Also Published As

Publication number Publication date
US9788074B2 (en) 2017-10-10
EP3131254B1 (en) 2018-12-19
KR102364085B1 (ko) 2022-02-17
EP3131254A1 (en) 2017-02-15
US20170048591A1 (en) 2017-02-16
KR20170019262A (ko) 2017-02-21
CN106454499B (zh) 2019-06-04

Similar Documents

Publication Publication Date Title
US11153431B2 (en) Mobile terminal and method of operating the same
US9602954B2 (en) Mobile terminal and method for controlling the same
CN106454499B (zh) 移动终端及其控制方法
US10540003B2 (en) Head mounted display device and method for controlling the same
CN105589732B (zh) 通过虚拟环境共享信息的设备和方法
US10104312B2 (en) Mobile terminal and method for controlling the same
EP3086538B1 (en) Mobile terminal and communication system using said terminal
US10719119B2 (en) Mobile terminal and method for controlling the same
US10044928B2 (en) Mobile terminal and method for controlling the same
CN104902066B (zh) 移动终端及其控制方法
CN103729055B (zh) 多显示设备、输入笔、多显示控制方法和多显示系统
CN106067834A (zh) 可穿戴装置及其控制方法
KR101642808B1 (ko) 이동단말기 및 그 제어방법
US20180253717A1 (en) Terminal apparatus and control method for terminal apparatus
CN107861613A (zh) 显示与内容相关联的导航器的方法和实现其的电子装置
US10645141B2 (en) Mobile terminal and method for controlling the same
KR20160031305A (ko) 이동 단말기 및 그 제어 방법
CN107203261A (zh) 手表型移动终端及其控制方法
US10356468B2 (en) Intelligent agent system comprising terminal devices, and control method
KR20170055296A (ko) Hmd 및 그 hmd의 제어 방법
KR102585489B1 (ko) 워치 타입의 이동단말기 및 그 제어방법
CN106331797A (zh) 移动终端及其控制方法
KR102369559B1 (ko) 단말기
WO2020156381A1 (zh) 视频播放方法及终端设备
KR20170035755A (ko) 이동 단말기 및 그 제어 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant