WO2012161546A2 - Control system for a user control of a network access media device using a run-time engine - Google Patents

Control system for a user control of a network access media device using a run-time engine Download PDF

Info

Publication number
WO2012161546A2
WO2012161546A2 PCT/KR2012/004154 KR2012004154W WO2012161546A2 WO 2012161546 A2 WO2012161546 A2 WO 2012161546A2 KR 2012004154 W KR2012004154 W KR 2012004154W WO 2012161546 A2 WO2012161546 A2 WO 2012161546A2
Authority
WO
WIPO (PCT)
Prior art keywords
media
user
control
information
unit
Prior art date
Application number
PCT/KR2012/004154
Other languages
French (fr)
Korean (ko)
Other versions
WO2012161546A3 (en
Inventor
이재인
문민식
Original Assignee
주식회사 마인드웨어?스
주식회사 마인드웨어코퍼레이션즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 마인드웨어?스, 주식회사 마인드웨어코퍼레이션즈 filed Critical 주식회사 마인드웨어?스
Publication of WO2012161546A2 publication Critical patent/WO2012161546A2/en
Publication of WO2012161546A3 publication Critical patent/WO2012161546A3/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208Display device provided on the remote control
    • H04N21/42209Display device provided on the remote control for displaying non-command information, e.g. electronic program guide [EPG], e-mail, messages or a second television channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q9/00Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4221Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4852End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus

Definitions

  • the present invention relates to a control device for a user control of a network connected media device using a runtime engine and a control method using the same.
  • the viewing time of the media consumer requires too much time for selection and operation for media consumption, including channel selection.
  • the present invention has been made to solve the above-mentioned problems, and on the consumer side, many media delivery channels reduce the selection time and excessive time spent on operations prior to consuming media, and more actively and intensively. This is to improve the existing method so that time can be used for media consumption.
  • control device and method that can overcome the limitations of the proper control of devices that can watch the video of the Internet through the collection, such as a channel or download, such as a smart TV.
  • a control system for user control of a network-connected media device using a runtime engine contracts with a manufacturer, a media supplier, and a media supplier that provides a display device to provide media to an end consumer.
  • At least one media provider which is a portal or social network service (SNS) provider, and is connected to a media gateway or a personal mobile device through a wired or wireless network;
  • a controller that plays a role of a relay with the media provider in using a personal mobile device possessed by a user as a remote controller, and connects to an external display to control the personal mobile device, and controls the personal mobile device.
  • SNS social network service
  • At least one media gateway equipped with an execution engine unit for dynamically providing various menu configurations to a user of the device, and a graphical user interface (GUI) engine unit; Execution engine for controlling data to be transmitted / received from the media provider or media gateway, selecting a channel of media, requesting detailed information, adjusting sound, etc., and exchanging data with an application installed in a terminal of other users /
  • a control unit a memory unit for storing an execution engine for running in an operating system and storing data, a GPS / location recognition unit for controlling the setting of its own location information and transmitting / receiving various events or information therethrough,
  • At least one personal portable device including a display unit and a wireless communication unit for communication for controlling the media gateway.
  • the personal portable device may include a sensor including one or more of a speed sensor, a vibration sensor, a direction sensor, an acceleration sensor, a touch sensor, or an illuminance sensor that is in charge of an input / output unit through various additional devices possessed by the personal portable device. And a GUI engine unit for controlling graphics and text for expressing the requested media / message / information and for controlling display of the display unit for processing communication with a user of the device.
  • a sensor including one or more of a speed sensor, a vibration sensor, a direction sensor, an acceleration sensor, a touch sensor, or an illuminance sensor that is in charge of an input / output unit through various additional devices possessed by the personal portable device.
  • a GUI engine unit for controlling graphics and text for expressing the requested media / message / information and for controlling display of the display unit for processing communication with a user of the device.
  • the personal mobile device secures a control right through a predetermined pre-registration procedure with the media gateway, accesses the media gateway using the control right, and requests the media library from the personal mobile device.
  • the media gateway may set a plurality (multiple) of communication targets by not only the media provider, but also other media consumers, the same area other than the unspecified number, the same media gateway access user, or an acquaintance connected to the social networking service (SNS).
  • Media consumers It is able to provide a plurality of interactive services (multiple media providers).
  • the personal mobile device stores and manages related information such as classification information / channel information / evaluation information / information / time information of a media type selected by the user through a built-in information agent, and stores the related information.
  • the media provider may be transmitted to the media provider or media gateway, and the media provider may be configured to record and store various information transmitted by the information agent in a log form through communication with the media gateway unit or a personal portable device unit.
  • the personal mobile device stores and stores dynamic elements such as basic values, locations, and relationships with other users who are connected by SNS based on media consumption / selection history and event participation history, rather than direct input.
  • a magnetic information setting may be automatically set for storing data related to storage / dynamic reactions, which allows the response to external events to be adjusted according to their preferences / conditions.
  • the personal portable device may notify an event or organize participation in a user group in use and a group of a specific media gateway band connected to a specific media gateway according to the self information setting.
  • the media gateway is implemented to display a message provided from a private media provider on a display at a requested time point, or to control a transfer and open command to the personal mobile device.
  • the present invention it is possible to solve the problem that the time required for selection and consumption of media due to the large number of media delivery channels on the consumer side requires excessive time, and the media channel by the remote control on the supplier side. It can solve the problem of difficulty in configuring the user interface of the EPG (Electric Program Guide) for selection, and limit the proper control of devices that can watch videos of the Internet, such as smart TVs, through the collection of channels or downloads. It is possible to overcome the problem, and to provide a control control apparatus and method capable of solving the control problem for one TV and a plurality of individual devices.
  • EPG Electronic Program Guide
  • FIG. 1 is a block diagram of a control device for user control of a network connected media device using a runtime engine according to the present invention.
  • FIG. 2 is a control flowchart of a media request in a user control of a network connected media device using a runtime engine according to the present invention.
  • FIG. 3 is a control flowchart of event participation and notification in user control of a network connected media device using a runtime engine according to the present invention.
  • an external command and a user may sense visual, auditory, tactile, or vibration or direction of a device to each device (media transceiver itself such as IPTV, SmartTV, and its controller). It starts with mounting each execution engine for configuring UI / GUI of user layer or individual by using additional device.
  • the media gateway has a runtime engine and a web application or web on a personal mobile device with a different runtime engine. This can be solved by communicating with the browser.
  • This approach is to (1) personalize and automate the remote control of a user's network device, i.e., a mobile device (including an iPod touch, a Wi-Fi device such as a PMP) that has an operating system.
  • a user's network device i.e., a mobile device (including an iPod touch, a Wi-Fi device such as a PMP) that has an operating system.
  • Server-based agent and set-top box server or external remote server media provider's server or portal that collects and provides channel information to provide services.
  • It is SNS making TV watching channel. In other words, it connects to the global service OpenAPI (Open Access Protocol), which provides this service, and synchronizes the information personalized and watched by people with similar tastes to follow media consumption such as the stars and leaders of the club.
  • OpenAPI Open Access Protocol
  • the remote controller service application may receive not only the screen control but also the message from the media provider (it may be displayed on the screen, or may be displayed only on a personal mobile device if viewed by multiple users), and related to the program in the middle of the media process. Use it as a chat window for events such as simple quiz competitions.
  • smart agents that collect reactions to viewing records / events of these users and collect related information for interactive service, and automatically take analysis and recommendation information and configure them on the screen with user consent. Develop and provide.
  • the interface uses a variety of additional devices such as recorders, acceleration sensors, vibration sensors, etc. To solve it.
  • the problem of control of one TV and a plurality of individual devices can be solved through a media media control tool or a server of a media provider, and (1) unique identifier information of a plurality of network connected portable devices in a single media provider. There may be a way to assign an identifier key.
  • the participation unit may be grouped for various competitions in a single media intermediate control tool unit, a local unit using GPS of a device, a media provider and service broker unit, and a national unit in individual devices.
  • the issue of Apple's GPS tracking has recently revealed, users 'information leakage is becoming more and more problematic, so that users' information is not exposed when they respond to and participate in events. If the participant agrees to the winning or specific reward after the event, the information disclosure scope may be provided to the user.
  • FIG. 1 is a block diagram of a control device for user control of a network connected media device using a runtime engine according to the present invention.
  • the execution engine / control unit 101 uses data transmitted from the media gateway 109 or the media provider 110 and an external server / service system 111 (a public media server, a portal, an SNS service system, etc.). It is responsible for configuring and controlling the display unit 106 to enable remote control such as selecting a channel of the media, requesting detailed information, and adjusting sound.
  • an external server / service system 111 a public media server, a portal, an SNS service system, etc.
  • the execution engine / control unit 101 may transmit information related to the media or event consumed by the user to the media gateway 109 or the media provider 110 and the external server / service system 111 or other information with the user's permission. Exchange data with applications installed on users' terminals.
  • the memory unit 102 stores an execution engine for running in a user terminal operating system and repeatedly performs data transmission / reception with the media gateway 109 or the media provider 110 and the external server / service system 111. It is responsible for storing and managing the data used.
  • the GPS / location recognizing unit 103 uses various technical means, such as location information set in the media gateway 109, WPS using location information of a GPS device or WiFi of a mobile device, and location information acquired through a base station of a mobile communication company. It is a section that controls the setting of its own location so that various events or information can be transmitted and received.
  • the event such as a message or quiz / advertisement may be sent only to users living or staying in the specific region. Can be used to send and receive.
  • the sensor unit 104 is in charge of the input / output unit through various additional devices possessed by the personal portable device.
  • the item is displayed on the actual remote control or display unit 106, that is, the personal mobile device.
  • the sensor unit 104 reflects the user's selection only by selecting it using a camera sensor connected to a display such as a TV or shaking it to the left or right using a sensor built in the device. It can also be an input / output device.
  • the sensor unit 104 may be provided to obtain a control right by drawing a star shape or an Arabic numeral 8 by using a mobile device when using a plurality of controls at the same time, which is more than control of a button or a touch screen. This is an example of the control section for the purpose of simple use.
  • the GUI engine unit 105 or the speaker / A function for requesting the recording unit 108 and the like is also performed.
  • the GUI engine unit 105 displays graphics and text for representing media / messages / information requested by the execution engine / control unit 101, the memory unit 102, or various device attachment control units 103, 104, 108, and the like. It controls, and is responsible for the core control of the display unit 106 to handle communication with the user of the device.
  • the text is represented instead of the image / icon, or vice versa, the 2D image is automatically converted into a 3D image to provide a three-dimensional effect.
  • the display unit 106 refers to a screen area of the personal mobile device connected to the network. More specifically, the list / detail information / playback of various media implemented by the execution engine 101 as well as notifications of various events, message pop-ups, news, and exposure of the notification are displayed, and various information input by the user are displayed. This is the area where the delivered results are expressed.
  • the wireless communication unit 107 is connected via TCP / IP through WiFi, Cellular, Bluetooth, etc. owned by a network-connected personal portable device, or uses a radio frequency (RF) such as IR through a separate signal conversion attachment device for each device. It is responsible for the communication for controlling the media gateway 109.
  • RF radio frequency
  • the speaker / recording unit 108 is an area controlled for the purpose of providing more various control of the media gateway using a user's mobile device. In other words, it is possible to record and analyze the user's voice command to request a query to the gateway or external server or to express the media selection / message call / information provided by the GUI engine. It uses the TTS engine to handle the process of reading it in the same language as the language setting of the mobile device.
  • the media gateway 109 serves as a gateway that acts as a relay between the media provider 110 and an external server / service system 111 service in using a mobile device possessed by a user as a remote controller. do.
  • IPTV IPTV
  • SmartTV SmartTV
  • the menus are dynamically configured for users of basic controllers and portable network devices that will be connected and controlled by an external display such as a TV to control the device. It is equipped with execution engine part and GUI engine part inside the device to provide a, and the GUI provided to the user can be changed to Runtime without any additional updating process.
  • the media provider 110 refers to a media providing server and a user management system of those who provide IPTV and SmartTV or those who supply media to end consumers by making a contract with a producer or provider of media.
  • the user's portable terminal i.e., the remote controller, transmits and receives media and data from the media provider 110 via the media gateway 109 and is directly connected via TCP / IP to receive media and data from the media provider 110.
  • the method of transmitting and receiving can be used as an option.
  • the external server / service system 111 refers to an open media provider, a portal, an SNS service provider, and the like, and a user's portable terminal, i.e., a remote controller, is connected to the media from the media provider 110 via the media gateway 109.
  • a user's portable terminal i.e., a remote controller
  • a method of transmitting and receiving data and a method of directly transmitting and receiving media and data from the media provider 110 by directly connecting through TCP / IP may be used.
  • FIG. 2 is a control flowchart of a media request in a user control of a network connected media device using a runtime engine according to the present invention.
  • the personal mobile device 21 secures a control right through the media gateway 22 and a predetermined pre-registration procedure (including registration of a plurality of mobile devices) and accesses the media gateway 22 using the control right (S201). ).
  • the device stores and manages information related to the user, the existing media consumption pattern, or the channel frequently used by the individual, so that the user can access the media device and optimize it according to his / her media usage behavior. Helping you take control with your information can save you time and money.
  • the conventional remote controller uses a plurality of radio frequencies for communication, there is a possibility of a malfunction as the plurality of controllers operate without restriction.
  • the media gateway 22 uses a separate restrictive protocol, such a malfunction can be prevented in advance.
  • the connection rights of the multiple devices may be possible by allowing the control right to be used in the singular form only by the permission or repeated request of the existing controller user.
  • the media gateway 22 When requesting a media library, the media gateway 22 identifies the information delivered by the requested user (or a plurality of devices) or lowers the media list last requested and delivered by the personal mobile device 21 ( S202).
  • the media gateway 22 may provide personalized media preference information of a single or a plurality of media viewers without a separate operation procedure.
  • the media gateway 22 is an Internet TV mainly watched on a PC using a video player, an IPTV broadcasted on a premium Internet network (VOD / MOD), and a connected TV provided by a manufacturer by adding an Internet connection function to an existing TV. It can be classified into N-Screen-linked STB-type smart TVs and TVs incorporating play into STBs, and integrated smart TVs with N-Screen-linked open applications.
  • a device such as a high-performance operating system such as a PC mainly used in Internet TV and a chrome OS, which is an integrated smart TV area, stores or manages a user's preferred media or media usage environment / method.
  • agent software that can transmit and receive information
  • media that were viewed on one device can be continuously viewed on other devices, and the user should be able to continuously use the control configuration necessary for users' media control and their favorite menus and media playback anytime, anywhere.
  • a PC-based / set-top box type smart TV as well as an IPTV set-top box, a TV, a runtime-based system that can activate the functions of the sensor unit 103, the GUI engine unit 105, and the display unit 106 in FIG. It is equipped with an engine and optimized for each user and supports a screen providing function for media consumption based on the user's usage record (S203).
  • the media provider 23 has previously used the PC or set-top box unit as a standard for the consumer of the media using a TV or a PC. Recently, when N-Screen is raised, it is individually identifying each device from the device unit to the portable network device of the consumer to support the continuous use of the media used by the consumer. However, it is still a level that distinguishes the media that consumers have seen and purchased media, and the system configured through the present invention is approaching fundamentally different in the following two areas.
  • the two-way advantage which is said to be the advantage of IPTV, is not a 1: N two-way between media provider and consumer, but also to the supplier as well as to other media consumers, to the same region, to the same region, to the same gateway access user, or to SNS. It is distinguished from the conventional method in that it is an N: N bidirectional service that targets the point of being friends and colleagues connected (S204).
  • media consumer is composed of N (media consumer): N (multiple media providers / multiple SNS service providers, etc.) in the conventional 1: N manner (S205). ).
  • the screen of a media device such as a TV is generally a graphic user interface (GUI) provided by the media provider 23 and an electric program guide (EPG) called 'broadcast schedule / combination table' provided thereon.
  • GUI graphic user interface
  • EPG electric program guide
  • All-in-one smart TV provides 'users' by setting the user's own GUI to set / save / call to use, but this is still a level that can be set in the media gateway (22) unit.
  • the S207 to S209 items are in charge of the execution and processing of (1) external business logic driven by the runtime engine of the personal mobile device 21 or the media gateway 22 (the execution engine / control unit 101 of FIG. 1). ) And (2) GUI dynamic components (GUI engine 105 of FIG. 1) to personalize and provide a GUI of an external display or personal mobile device 21 according to the user's experience / symbol / location / emotion status and the like. And (3) related to the information agent sector responsible for the transmission and reception of such intelligent and massive data.
  • the information agent of the user's personal portable device 21 stores / manages related information such as classification information / channel information / evaluation information / information / time information on the type of media consumed for a relatively short period of time.
  • related information such as classification information / channel information / evaluation information / information / time information on the type of media consumed for a relatively short period of time.
  • the detailed information about the media or related images / video clips, etc. are requested to S208 through the media gateway 22.
  • data stored in S208 may be received and information may be transmitted and received with an information agent of another user / family (S207).
  • the media provider 23 records / stores various information transmitted by the information agent in a log form through communication with the media gateway 22 unit or the end user personal mobile device 21 unit. Only if the user's storage agreement exists, it is saved / managed.
  • the media provider 23 analyzes not only the media gateway 22 but also the preferences and the media consumption history of the unit of the end consumer personal mobile device 21 to help the user select a better media (S208).
  • the SNS system 24 expands the room for mutual intervention by informing other friends of online activities of the related party.
  • users who have a relationship with me or who have a relationship with me are provided with information about the media they are currently watching or watched to help them make rational judgments and choices about the media.
  • the detailed information inquiry step for a specific media can be supported to refer to the evaluation of peers or experts in the relevant field (S209).
  • FIG. 3 is a control flowchart of event participation and notification in user control of a network connected media device using a runtime engine according to the present invention.
  • Dynamic conditions such as user's personal participation / symbol / location received from S301 and events for various groups such as user groups in use by accessing a specific media gateway 32 and groups of gateway bands (advertisement, quiz, co-purchase, offline) Notifications of events, etc.) can be notified or participation can be organized (S302).
  • the device may react differently to each other, but if the user wants to react in the same way, the compatible data is extracted according to the characteristics of each device (terminal resolution, impact-motion sensor, etc.) of the user. Conversion is supported so that the media gateway 32 can be manipulated using the device 31 (S303).
  • the media gateway 32 maintains a connection with one or more users connected to the user for a request from another user connected to the user connected to the user, an event requested from the media provider 33, or serves as a simple data relay. It is in charge (S304).
  • the media gateway 32 receives the requested event and delivers the requested event to the user who is currently controlling the media gateway 32. If only a specific event is to be delivered or if a plurality of users are watching media using a single gateway, the event information is provided only to the personal mobile device 31 of a specific person.
  • the event control function in the media gateway 32 step may prevent the user from transmitting unnecessary events, or inversely, provide various events to help media consumption combined with a more active network.
  • the timing of the reply may vary depending on the user's network environment or conditions.
  • the method for matching the user's reply may be different, considering that the time to reach the media provider 33 server or the external service system that actually generated the event may be different. .
  • the external event message / data may be delivered to the plurality of media gateways 32 or the user's personal portable device 31 at different times according to the network environment. For this reason, in case of events that need to be responded to in a short time or on a first-come, first-served basis, this is a method to obtain fairness of the method related to the event that time is important factor such as a strict deadline event.
  • the message is delivered with the time information notified to the user, and the schedule information is transmitted so that the message / data is opened only when the time is reached ( S307).
  • the media gateway 32 is responsible for exposing the message provided from the media provider 33 server / event server to the TV or external display at the requested time, or controlling the delivery / open command to the user device, and the final device as well.
  • replying to an event of or responding to a quiz or first-come-first-served basis, etc.
  • the media gateway 32 arrives at the server and records the time stamp of the media gateway 32 and arrives at the server, the ranking is based on the time stamp. Determination plays an intermediate role to maintain fairness or balance (S308).
  • the user portable device 31 is responsible for receiving / opening / replying and deleting a message according to a message control command included in an external system (media provider 33) or media gateway 32 (S309).

Abstract

The present invention relates to a control apparatus for a user control of a network access media device using an online run-time engine, and to a control method using same. The control system for the user control of the network access media device using the run-time engine according to the present invention comprises: one or more media providers selected from among a manufacturer providing a display apparatus, a media company, and a portal or social networking service provider contracted by the media company to provide media to an end-consumer; at least one media gateway on which is mounted a controller which serves as a mediator for the one or more media providers so as to use a personal portable device of the user as a remote control and which is connected to and controls an external display so that the external display may be controlled by the personal portable device, an execution engine unit for dynamically providing the user of the personal portable device with a configuration of various menus, and a GUI engine unit; an execution engine/control unit which controls data transceived to/from the media providers or the media gateways, and controls a channel selection of media, detailed information requests, and a volume adjustment, and exchanges data with an application installed in the terminals of other users; a memory unit for storing an execution engine to be driven in an operating system and data; a GPS/location recognition unit for setting information on the location of the user; a display unit serving as a screen area; and a wireless communication unit for communication.

Description

런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템Control system for user control of network connected media device using runtime engine
본 발명은 온라인상에서 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 장치 및 이를 이용한 제어 방법에 관한 것이다.The present invention relates to a control device for a user control of a network connected media device using a runtime engine and a control method using the same.
미디어 플레이어(주로 TV)가 빠른 속도로 진화하고 있다.Media players (mostly TVs) are evolving at a rapid pace.
금년 말 아날로그 송출이 중단되는 한국은 물론, 선진국을 중심으로 IPTV, SmartTV 등 네트워크에 항상적으로 연결되어 있는 미디어 재생 장치들에 의해 영화, 드라마, 음악 등의 미디어 재생과 관련된 기술개발들이 본격적으로 이루어지고 있다.At the end of this year, the development of technologies related to media playback such as movies, dramas, and music is being made in earnest by media playback devices connected to networks such as IPTV and SmartTV, not only in Korea but also in developed countries. ought.
이 네트워크에 접속되어 있는 TV 및 미디어 재생매체가 가지고 있는 문제점 가운데 하나로 지적되고 있는 것이 바로 너무도 많은 미디어 송출 채널이다.Too many media delivery channels have been pointed out as one of the problems with TV and media playback media connected to this network.
이 때문에 시청을 하는 미디어 소비자의 입장에서는 채널의 선택을 포함한 미디어 소비를 위한 선택 시간과 조작에 너무 많은 시간이 요구된다는 것이다.For this reason, the viewing time of the media consumer requires too much time for selection and operation for media consumption, including channel selection.
공급자 측면에서도 TV 시청자층이 10대 미만의 유아로부터 노년층에 이르기까지 폭 넓은 사용자층이라는 점은 리모트 컨트롤에 의한 미디어 채널 선택을 위한 EPG(Electric Program Guide)의 사용자 인터페이스 구성에 많은 어려움을 겪게 된다.On the supplier side, the fact that TV viewers are a wide user base, from infants under 10 years old to the elderly, has a lot of difficulties in constructing the user interface of the EPG (Electric Program Guide) for media channel selection by remote control.
또한 IPTV와 같이 공급사가 편성과 미디어에 대한 통제권을 가지고 있는 경우는 그나마 미디어에 대한 시청 등급 등의 관리가 상대적으로 용이하지만, 스마트TV와 같이 인터넷의 동영상을 채널로 또는 다운로드 등의 수집을 통해 시청할 수 있는 기기들의 경우 적절한 컨트롤에 한계가 존재한다.In addition, if the supplier has control over programming and media such as IPTV, it is relatively easy to manage the ratings of the media.However, it is possible to watch videos from the Internet through channels or downloads such as smart TVs. For some appliances, there is a limit to proper control.
또한 스마트 TV 및 IPTV와 같이 운영체제는 물론 어플리케이션 구동을 위한 가상머신 등의 기동이 가능한 시스템을 이용, TV와 컨트롤러 1개의 대응이 아닌 1대의 TV와 복수의 가족 또는 동거인들의 개별 기기에 대한 제어를 통해 퀴즈와 같은 대화형 도구로 활용할 수 있도록 지원이 필요하고, 각국 단위를 넘어서 다른 미디어 소비자와 게임을 즐기는 등의 도구로 활용할 수 있도록 지원이 필요하다.In addition, by using a system capable of starting the operating system as well as a virtual machine for driving applications such as smart TVs and IPTVs, it is possible to control one TV and individual devices of a plurality of family members or households, rather than one TV and a controller. It needs support to be used as an interactive tool such as a quiz, and needs to be used as a tool such as playing games with other media consumers across countries.
본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로서, 소비자 측면에서 많은 미디어 송출 채널로 인해 미디어를 소비하기 이전 단계에 발생하는 선택 시간과 조작에 소비되는 과도한 시간 할애를 줄이고, 보다 적극적이고 집중적으로 미디서 소비에 시간이 사용될 수 있도록, 기존의 방법을 개선하기 위함이다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and on the consumer side, many media delivery channels reduce the selection time and excessive time spent on operations prior to consuming media, and more actively and intensively. This is to improve the existing method so that time can be used for media consumption.
또한, 공급자 측면에서 리모트 컨트롤에 의한 미디어 채널 선택을 위한 EPG(Electric Program Guide)의 사용자 인터페이스 구성에 전 연령층 모두를 고려할 수 없다는 어려움을 해결하고자 한다.In addition, from the supplier's point of view, it is intended to solve the difficulty of not considering all age groups in the user interface configuration of the EPG (Electric Program Guide) for media channel selection by remote control.
또한, 스마트 TV와 같이 인터넷의 동영상을 채널로 또는 다운로드 등의 수집을 통해 시청할 수 있는 기기들의 적절한 컨트롤의 한계를 극복할 수 있는 제어장치 및 방법을 제공하고자 한다.In addition, to provide a control device and method that can overcome the limitations of the proper control of devices that can watch the video of the Internet through the collection, such as a channel or download, such as a smart TV.
또한, 1대의 TV와 복수 개별 기기에 대한 제어 문제를 해결할 수 있는 컨트롤 제어장치 및 방법을 제공하고자 한다.In addition, to provide a control control apparatus and method that can solve the control problem for one TV and a plurality of individual devices.
상술한 과제를 해결하기 위한 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템은, 디스플레이 장치를 제공하는 제조사, 미디어 공급사, 상기 미디어 공급사와 계약을 맺고 최종 소비자에게 미디어를 공급하는 포탈 또는 SNS(Social Network Service) 제공자 중 어느 하나이며 미디어 게이트웨이 또는 개인 휴대기기와 유무선망으로 연결된 하나 이상의 미디어 제공자와; 사용자가 보유하고 있는 개인 휴대기기를 원격 제어기로 활용함에 있어 상기 미디어 제공자와의 중계자 역할을 담당하며, 상기 개인 휴대기기의 제어를 받기 위해 외부 디스플레이와 접속하여 제어를 수행하는 컨트롤러와, 상기 개인 휴대기기의 사용자에게 동적으로 다양한 메뉴의 구성을 제공하기 위한 실행엔진부와, GUI (Graphic User Interface) 엔진부를 탑재하는 하나 이상의 미디어 게이트웨이와; 상기 미디어 제공자 또는 미디어 게이트웨이로부터 송수신되는 데이터 제어, 미디어의 채널 선택, 상세 정보 요청, 음향을 조절하는 등의 원격조절이 가능하도록 제어하고, 다른 사용자들의 단말에 설치된 어플리케이션과 데이터를 교환하는 실행 엔진/제어부와, 운영체제에서 구동되기 위한 실행엔진을 저장 및 데이터를 저장하는 메모리부와, 자신의 위치정보의 설정 및 이를 통해 각종 이벤트나 정보를 송수신할 수 있도록 제어하는 GPS/위치 인식부, 화면 영역인 표시부와, 미디어 게이트웨이를 제어하기 위한 통신을 담당하는 무선통신부를 포함하는 하나 이상의 개인 휴대기기로 이루어진다. In order to solve the above problems, a control system for user control of a network-connected media device using a runtime engine according to the present invention contracts with a manufacturer, a media supplier, and a media supplier that provides a display device to provide media to an end consumer. At least one media provider, which is a portal or social network service (SNS) provider, and is connected to a media gateway or a personal mobile device through a wired or wireless network; A controller that plays a role of a relay with the media provider in using a personal mobile device possessed by a user as a remote controller, and connects to an external display to control the personal mobile device, and controls the personal mobile device. At least one media gateway equipped with an execution engine unit for dynamically providing various menu configurations to a user of the device, and a graphical user interface (GUI) engine unit; Execution engine for controlling data to be transmitted / received from the media provider or media gateway, selecting a channel of media, requesting detailed information, adjusting sound, etc., and exchanging data with an application installed in a terminal of other users / A control unit, a memory unit for storing an execution engine for running in an operating system and storing data, a GPS / location recognition unit for controlling the setting of its own location information and transmitting / receiving various events or information therethrough, At least one personal portable device including a display unit and a wireless communication unit for communication for controlling the media gateway.
여기서, 상기 개인 휴대기기는, 상기 개인 휴대기기가 보유하고 있는 각종 부가장치들을 통한 입출력 부문을 담당하는 속도센서, 진동센서, 방향센서, 가속도센서, 터치센서 또는 조도센서중 하나 이상을 포함하는 센서부와, 요청되는 미디어/메시지/정보를 표현하기 위한 그래픽과 텍스트를 컨트롤하며, 기기의 사용자와 커뮤니케이션을 담당하도록 처리하는 표시부의 표시 제어를 담당하는 GUI 엔진부를 더 포함하여 이루어질 수 있다. The personal portable device may include a sensor including one or more of a speed sensor, a vibration sensor, a direction sensor, an acceleration sensor, a touch sensor, or an illuminance sensor that is in charge of an input / output unit through various additional devices possessed by the personal portable device. And a GUI engine unit for controlling graphics and text for expressing the requested media / message / information and for controlling display of the display unit for processing communication with a user of the device.
여기서, 상기 개인 휴대기기는 상기 미디어 게이트웨이와 정해진 사전 등록절차를 통해 제어권을 확보하고 해당 제어권을 이용해 상기 미디어 게이트웨이에 접속하고, 상기 개인 휴대기기로부터 미디어 라이브러리를 요청하는 경우 상기 미디어 게이트웨이에서는 요청된 사용자가 전달하는 정보를 식별하거나 해당 개인 휴대기기가 마지막으로 요청하여 전달해준 미디어 목록을 송신하도록 구현되는 것이 바람직하다. In this case, the personal mobile device secures a control right through a predetermined pre-registration procedure with the media gateway, accesses the media gateway using the control right, and requests the media library from the personal mobile device. Is preferably implemented to identify the information conveyed by or to transmit the media list last requested and delivered by the personal mobile device.
여기서, 상기 미디어 게이트웨이는 상기 미디어 제공자는 물론 다른 미디어 소비자, 불특정 다수가 아닌 같은 지역, 같은 미디어 게이트웨이 접속 사용자, 혹은 SNS(Social Networking Service)로 연결되어 있는 지인까지를 통신 대상으로 설정하여 다수(복수의 미디어 소비자) : 다수(복수의 미디어 제공자)의 양방향 서비스를 제공할 수 있는 것이 특징이다.Here, the media gateway may set a plurality (multiple) of communication targets by not only the media provider, but also other media consumers, the same area other than the unspecified number, the same media gateway access user, or an acquaintance connected to the social networking service (SNS). Media consumers): It is able to provide a plurality of interactive services (multiple media providers).
여기서, 상기 개인 휴대기기는 내장된 정보 에이전트를 통해 자신이 선택한 미디어의 분류정보/채널정보/평가정보/소비한 미디어 종류에 대한 정보/시점 정보 등 관련 정보를 저장 및 관리하며, 그 관련 정보를 상기 미디어 제공자 또는 미디어 게이트웨이로 전송하고, 상기 미디어 제공자는 상기 미디어 게이트웨이 단위 또은 개인 휴대기기 단위와 통신을 통해 상기 정보 에이전트가 전송한 각종 정보를 로그 형태로 기록 및 저장하도록 구현된다.Here, the personal mobile device stores and manages related information such as classification information / channel information / evaluation information / information / time information of a media type selected by the user through a built-in information agent, and stores the related information. The media provider may be transmitted to the media provider or media gateway, and the media provider may be configured to record and store various information transmitted by the information agent in a log form through communication with the media gateway unit or a personal portable device unit.
여기서, 상기 개인 휴대기기는 직접입력이 아닌 미디어 소비/선택이력 및 이벤트 참여 이력에 기초하여 기본 값과 위치, SNS로 관계를 맺고 있는 다른 사용자와의 관계 등 동적 요소가 결합되어 저장되고, 이를 통해 외부 이벤트에 대한 반응을 자신의 기호/여건에 따라 조절할 수 있도록 하는 저장/동적 반응과 관련된 데이터를 저장하는 자기 정보 설정이 자동으로 설정될 수 있다. Here, the personal mobile device stores and stores dynamic elements such as basic values, locations, and relationships with other users who are connected by SNS based on media consumption / selection history and event participation history, rather than direct input. A magnetic information setting may be automatically set for storing data related to storage / dynamic reactions, which allows the response to external events to be adjusted according to their preferences / conditions.
여기서, 상기 개인 휴대기기는 상기 자기 정보 설정에 따라 특정 미디어 게이트웨이에 접속되어 사용중인 사용자 그룹, 특정 미디어 게이트웨이 대역대의 그룹에 대한 이벤트을 통지하거나 참여를 조직할 수 있다.Here, the personal portable device may notify an event or organize participation in a user group in use and a group of a specific media gateway band connected to a specific media gateway according to the self information setting.
여기서, 상기 미디어 게이트웨이는 사익 미디어 제공자로부터 제공된 메시지를 요청된 시점에 디스플레이에 표시하거나, 상기 개인 휴대기기에 전달 및 오픈(Open) 명령어를 제어하는 역할을 담당하도록 구현된다.In this case, the media gateway is implemented to display a message provided from a private media provider on a display at a requested time point, or to control a transfer and open command to the personal mobile device.
상술한 본 발명의 해결 수단에 따르면, 소비자 측면에서 많은 미디어 송출 채널로 인해 미디어를 소비하기 위한 선택의 시간과 조작에 과도한 시간이 요구되는 문제를 해결할 수 있고, 공급자 측면에서 리모트 컨트롤에 의한 미디어 채널 선택을 위한 EPG(Electric Program Guide)의 사용자 인터페이스 구성에 많은 어려움을 겪는 문제를 해결할 수 있으며, 스마트 TV와 같이 인터넷의 동영상을 채널로 또는 다운로드 등의 수집을 통해 시청할 수 있는 기기들의 적절한 컨트롤의 한계를 극복할 수 있고, 1대의 TV와 복수 개별 기기에 대한 제어 문제를 해결할 수 있는 컨트롤 제어장치 및 방법을 제공하는 것이 가능하게 된다.According to the above-described solution of the present invention, it is possible to solve the problem that the time required for selection and consumption of media due to the large number of media delivery channels on the consumer side requires excessive time, and the media channel by the remote control on the supplier side. It can solve the problem of difficulty in configuring the user interface of the EPG (Electric Program Guide) for selection, and limit the proper control of devices that can watch videos of the Internet, such as smart TVs, through the collection of channels or downloads. It is possible to overcome the problem, and to provide a control control apparatus and method capable of solving the control problem for one TV and a plurality of individual devices.
도 1은 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 장치의 구성도이다.1 is a block diagram of a control device for user control of a network connected media device using a runtime engine according to the present invention.
도 2는 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 있어서 미디어 요청에 대한 제어 순서도이다.2 is a control flowchart of a media request in a user control of a network connected media device using a runtime engine according to the present invention.
도 3은 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 있어서 이벤트 참여 및 통지에 대한 제어 순서도이다.3 is a control flowchart of event participation and notification in user control of a network connected media device using a runtime engine according to the present invention.
이하, 첨부된 도면을 참조하여 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 장치 및 이를 이용한 제어 방법 및 작용 효과를 살펴본다.Hereinafter, a control apparatus for a user control of a network connected media device using a runtime engine according to the present invention, a control method and an effect using the same will be described with reference to the accompanying drawings.
먼저, 공통적으로 상술한 종래의 문제점 해결을 위해 각 기기(IPTV, SmartTV 등의 미디어 송수신기 자체와 이의 컨트롤러)에 외부의 명령과 사용자가 시각, 청각, 촉각 또는 장치의 진동이나 방향을 감지할 수 있는 부가장치를 이용하여 사용자 계층 또는 개인별 UI/GUI를 구성하기 위한 각각의 실행엔진을 탑재하는 것에서부터 시작된다.First, in order to solve the above-mentioned conventional problems, an external command and a user may sense visual, auditory, tactile, or vibration or direction of a device to each device (media transceiver itself such as IPTV, SmartTV, and its controller). It starts with mounting each execution engine for configuring UI / GUI of user layer or individual by using additional device.
소비자 측면에서, 많은 미디어 송출 채널로 인해 미디어를 소비하기 위한 선택의 시간과 조작에 너무 많은 시간이 요구되는 문제는 미디어 게이트웨이에 런타임 엔진을 탑재하고 다른 런타임 엔진이 탑재된 개인 휴대기기의 어플리케이션이나 웹 브라우저와 통신을 통해 제어하는 것으로 해결할 수 있을 것이다.On the consumer side, the issue of so many media delivery channels that requires too much time and manipulation to make choices for consuming media is that the media gateway has a runtime engine and a web application or web on a personal mobile device with a different runtime engine. This can be solved by communicating with the browser.
이러한 방식은 (1) 사용자의 네트워크 기기 즉 운영체제를 보유하고 있는 휴대기기(ipod touch, PMP와 같은 와이파이 기기를 모두 포함)를 개인화되고 자동화된 리모트 컨트롤러화 하는 것이다. (2) 단말기 자체의 에이전트, 셋탑박스를 서버화 하거나 혹은 외부의 원격서버(미디어 공급사의 서버 또는 제공되는 채널정보를 모아서 서비스를 제공하는 포탈)를 통해 관리를 수행한다. (3) TV 시청 채널을 SNS화 하는 것이다. 즉 본 서비스를 제공하는 글로벌 서비스 OpenAPI(개방형 접근 프로토콜 제공)에 연결되어 자신과 비슷한 취향의 사람들이 개인화하고 시청했던 정보들을 동기화해서 스타들이나 동호인의 리더 등의 미디어 소비 따라하기를 수행한다. (4) 해당 리모트 컨트롤러 서비스 어플리케이션은 단지 화면 제어뿐만 아니라 미디어 공급사의 메시지를 받을 수도 있고(화면에 띄워도 되고, 여럿이 보는 경우라면 개인 휴대기기에만 띄울 수도 있을 것이다), 미디어 진행 중간에 프로그램과 관련된 간단한 퀴즈대회와 같은 이벤트를 진행하는 대화창구로 활용할 수 있도록 한다. (5) 또한 이러한 사용자들의 시청기록/이벤트에 대한 반응을 수집하고 대화형으로 서비스를 하기 위해 관련 정보를 수집하고, 사용자 동의하에 자동으로 분석 및 추천정보를 가져다가 화면에 구성해 주는 스마트 에이전트를 개발하고 제공해 주도록 한다.This approach is to (1) personalize and automate the remote control of a user's network device, i.e., a mobile device (including an iPod touch, a Wi-Fi device such as a PMP) that has an operating system. (2) Server-based agent and set-top box server or external remote server (media provider's server or portal that collects and provides channel information to provide services). (3) It is SNS making TV watching channel. In other words, it connects to the global service OpenAPI (Open Access Protocol), which provides this service, and synchronizes the information personalized and watched by people with similar tastes to follow media consumption such as the stars and leaders of the club. (4) The remote controller service application may receive not only the screen control but also the message from the media provider (it may be displayed on the screen, or may be displayed only on a personal mobile device if viewed by multiple users), and related to the program in the middle of the media process. Use it as a chat window for events such as simple quiz competitions. (5) In addition, smart agents that collect reactions to viewing records / events of these users and collect related information for interactive service, and automatically take analysis and recommendation information and configure them on the screen with user consent. Develop and provide.
공급자 측면에서, 리모트 컨트롤에 의한 미디어 채널 선택을 위한 EPG(Electric Program Guide)의 사용자 인터페이스 구성에 많은 어려움을 겪게 문제는 인터페이스 측면에서 스마트 기기의 각종 부가장치 즉 녹음기, 가속도 센서, 진동 센서 등을 이용하는 것으로 해결하도록 한다.From the supplier's point of view, it is difficult to configure the user interface of the EPG (Electric Program Guide) for selecting a media channel by remote control. The problem is that the interface uses a variety of additional devices such as recorders, acceleration sensors, vibration sensors, etc. To solve it.
즉, (1) 간단하게 음성이나 제스쳐로 미디어 기기를 제어하거나(아래로 급격하면 내리면 화면을 통해 '전원을 차단하고 끌까요?'와 같은 메시지가 나오도록 하고 동그라미를 그리면 끄고, 가만 놔두거나 엑스를 표시하면 취소를 한다던지 하는, 1번숫자, 2번 숫자에 특정 채널을 배정하도록 할 수 있다. (2) 음성엔진을 탑재해서 음성으로 이를 제어하도록 할 수 있고, (3) 사용자의 나이나 취향에 따르 글씨를 키운다던가, 장애인을 위해 음성 TTS로 읽어 준다던지 어린 아이들에게 대표 아이콘으로 해당 프로그램의 EPG를 구성하도록 할 수 있다. (4) 또한 영화나 특정 프로를 시청하는 동안에는 사운드 조절을 위한 컨트롤과 채널 이동 컨트롤 만을 제공하다가 일단 다른 채널로의 이동을 누르면 그간 즐겨 보던 채널이나 공급자 혹은 다른 친구나 유명인이 보고 있는 채널을 안내해 준다던가 하는 방식으로 리모콘의 GUI를 셋탑박스와 같은 미디어 중간 제어도구와의 양방향 통신 및 커뮤니케이션을 통해 제어할 수 있도록 제공한다.In other words: (1) Simply control the media device with voice or gesture (if it falls down suddenly, a message like 'Do you want to turn off and turn off the power?' Through the screen, draw a circle, turn it off, leave it alone, or If you display it, you can assign a specific channel to number 1 or number 2, such as cancel, etc. (2) Equipped with voice engine, you can control it by voice, and (3) User's age You can make your own texts, read them by voice TTS for people with disabilities, or have young children compose the EPG of the program with representative icons (4) You can also control the sound while watching a movie or a specific program. Controls and Channel Moves Provide only controls and once you move to another channel, you'll see your favorite channel, provider, or other friend or celebrity. Deonga in a way that gives the channel guide that will be available for you to control the remote GUI through a two-way communication and communication with the media, the middle control tools, such as set-top boxes.
스마트TV와 같이 인터넷의 동영상을 채널로 또는 다운로드 등의 수집을 통해 시청할 수 있는 기기들의 경우 적절한 컨트롤에 한계는, 셋탑박스나 스마트TV 기기의 컨트롤을 통해 그 한계를 벗어날 수 있는 데, (1) 사용자가 Parent Control과 같은 기능을 활성화 하면, 디바이스 자체나 기본 리모콘의 동작을 막고, 아이들에게는 특정 레벨의 채널을 아예 틀 수 없도록 막도록 구현할 수 있고, (2) 노약자, 심신장애인, 유아를 위해 원격에서 특정 채널을 제어하거나 시청 중인 미디어에 대한 확인이 가능한 사용자 인터페이스를 제공할 수 있다.In the case of devices that can watch videos on the Internet through collections such as channels or downloads, such as smart TVs, the limitations on proper control can be overcome by the control of set-top boxes or smart TV devices. When the user activates a function such as Parent Control, it can block the operation of the device itself or the basic remote control, and prevent children from playing a certain level of channel at all. (2) Remote for the elderly, mentally disabled and infants. May control a specific channel or provide a user interface capable of checking the media being watched.
1대의 TV와 복수 개별 기기에 대한 제어의 문제는 하나의 미디어 중간 제어도구 또는 미디어 공급사의 서버 등을 통해 해결할 수 있으며, (1) 복수의 네트워크 접속 휴대 디바이스 개별의 식별자 정보를 단일 미디어 공급자 내의 유일 식별자키를 부여하는 방안이 있을 수 있다. (2) 미디어 공급사간의 제휴, 또는 국가/글로벌간 단일키를 이용하고, 해당 단일 및 그룹 미디어 중간 제어도구에 접속한 사용자들 간에 게임을 즐기도록 할 수 있고, (3) 스포츠 및 게임과 같은 라이브 미디어를 동일하게 시청하는 경우, 미디어 개별/국가/글로벌 사용자간의 대규모 이벤트와 경쟁 및 커뮤니케이션 도구로 활용이 가능하다. (4) 이러한 경우도 참여 단위는 개별 디바이스에서 단일 미디어 중간 제어 도구 단위, 기기의 GPS를 이용한 지역 단위, 미디어 공급사 및 서비스 브로커 단위, 국가단위의 다양한 경쟁을 위한 그룹핑이 가능하다. (5) 한편으로 최근 애플의 GPS 추적과 관련된 이슈에서 나타났듯 사용자들의 정보 유출이 점점 더 큰 문제가 되고 있으므로, 이에 사용자들이 이벤트에 반응하고 참여를 하는 시점에서는 사용자의 정보가 노출되지 않도록 하며, 이벤트 후에 당첨 또는 특정 보상에 참여자가 동의하는 경우 정보 공개범위를 사용자가 지정하여 노출하도록 제공할 수 있다.The problem of control of one TV and a plurality of individual devices can be solved through a media media control tool or a server of a media provider, and (1) unique identifier information of a plurality of network connected portable devices in a single media provider. There may be a way to assign an identifier key. (2) use a partnership between media providers, or a single key between countries / globals, and allow users to play games between users who access those single and group media intermediary controls, and (3) live games such as sports and games. When watching the same media, it can be used as a large-scale event, competition and communication tool between individual media, national and global users. (4) In such a case, the participation unit may be grouped for various competitions in a single media intermediate control tool unit, a local unit using GPS of a device, a media provider and service broker unit, and a national unit in individual devices. (5) On the other hand, as the issue of Apple's GPS tracking has recently revealed, users 'information leakage is becoming more and more problematic, so that users' information is not exposed when they respond to and participate in events. If the participant agrees to the winning or specific reward after the event, the information disclosure scope may be provided to the user.
도 1은 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 장치의 구성도이다.1 is a block diagram of a control device for user control of a network connected media device using a runtime engine according to the present invention.
실행 엔진/제어부(101)는 미디어 게이트웨이(109) 혹은 미디어 공급사(110) 및 외부의 서버/서비스 시스템(111, 공개 미디어 서버, 포탈, SNS 서비스 시스템 등)으로부터 전송되는 데이터를 이용하여 사용자들로 하여금 미디어의 채널을 선택거나 상세 정보를 요청하는 행위, 음향을 조절하는 등의 원격조절이 가능하도록 표시부(106)에 구성 및 제어를 가능케 해 주는 역할을 담당한다. The execution engine / control unit 101 uses data transmitted from the media gateway 109 or the media provider 110 and an external server / service system 111 (a public media server, a portal, an SNS service system, etc.). It is responsible for configuring and controlling the display unit 106 to enable remote control such as selecting a channel of the media, requesting detailed information, and adjusting sound.
또한, 실행 엔진/제어부(101)에는 사용자가 소비하는 미디어 혹은 이벤트와 관련된 정보를 사용자의 허락 아래 미디어 게이트웨이(109)나 미디어 공급사(110) 및 외부의 서버/서비스 시스템(111)에 전달하거나 다른 사용자들의 단말에 설치된 어플리케이션과 데이터를 교환한다.In addition, the execution engine / control unit 101 may transmit information related to the media or event consumed by the user to the media gateway 109 or the media provider 110 and the external server / service system 111 or other information with the user's permission. Exchange data with applications installed on users' terminals.
메모리부(102)는 사용자 단말 운영체제에서 구동되기 위한 실행엔진을 저장하는 역할과 함께 미디어 게이트웨이(109)나 미디어 공급사(110) 및 외부의 서버/서비스 시스템(111)과의 데이터 송수신 과정에 반복적으로 사용되는 데이터를 저장하고 관리하는 역할을 담당한다.The memory unit 102 stores an execution engine for running in a user terminal operating system and repeatedly performs data transmission / reception with the media gateway 109 or the media provider 110 and the external server / service system 111. It is responsible for storing and managing the data used.
GPS/위치 인식부(103)는 미디어 게이트웨이(109)에 설정된 위치정보나 휴대기기의 GPS 장치 혹은 WiFi의 위치정보를 활용하는 WPS, 이동통신사의 기지국을 통해 획득하는 위치정보 등 다양한 기술수단을 이용하여 자신의 위치를 설정하고 이를 통해 각종 이벤트나 정보를 송수신할 수 있도록 제어하는 부문이다. The GPS / location recognizing unit 103 uses various technical means, such as location information set in the media gateway 109, WPS using location information of a GPS device or WiFi of a mobile device, and location information acquired through a base station of a mobile communication company. It is a section that controls the setting of its own location so that various events or information can be transmitted and received.
예를들면, 특정 지역에 미디어 게이트웨이(109)에 연결되어 있는 사용자 혹은 특정 미디어 공급사(110)에 연결된 사용자가 있는 경우, 특정 지역에 거주 혹은 머물고 있는 사용자들에게만 메시지나 퀴즈/광고와 같은 이벤트를 송수신하는데 사용될 수 있다.For example, if there is a user connected to the media gateway 109 or a user connected to a specific media provider 110 in a specific region, the event such as a message or quiz / advertisement may be sent only to users living or staying in the specific region. Can be used to send and receive.
센서부(104)는 개인 휴대기기가 보유하고 있는 각종 부가장치들을 통한 입출력 부문을 담당한다. The sensor unit 104 is in charge of the input / output unit through various additional devices possessed by the personal portable device.
의사결정을 해야 하는 시점에 휴대기기가 아닌 미디어 디스플레이 즉 TV나 모니터에 좌/우측 각각에 사용자의 선택을 해야 할 영역을 표시하게 되면 이를 실제 리모트 컨트롤이나 표시부(106) 즉 개인 휴대기기에 나타난 항목을 버튼이나 터치로 선택하는 것이 일반적이나 센서부(104)는 TV와 같은 디스플레이에 연결된 카메라 센서를 이용해 선택하거나 기기에 내장된 센서를 이용, 좌측, 혹은 우측으로 흔드는 것 만으로 사용자의 선택을 반영할 수도 있는 입출력 디바이스가 된다. When the decision is made, when the area to be selected by the user is displayed on the media display, that is, the TV or the monitor, respectively, on the left and right sides of the mobile device, the item is displayed on the actual remote control or display unit 106, that is, the personal mobile device. It is common to select a button or a touch, but the sensor unit 104 reflects the user's selection only by selecting it using a camera sensor connected to a display such as a TV or shaking it to the left or right using a sensor built in the device. It can also be an input / output device.
또한 센서부(104)는 여러명의 컨트롤을 동시에 사용하는 경우, 휴대기기를 이용해서 별 모양을 그리거나 아라비아 숫자 8을 그려서 제어권을 획득할 수 있도록 제공될 수 있으며, 이는 버튼이나 터치스크린의 제어보다 간편하게 사용하기 위한 목적의 제어부문의 예시이다. In addition, the sensor unit 104 may be provided to obtain a control right by drawing a star shape or an Arabic numeral 8 by using a mobile device when using a plurality of controls at the same time, which is more than control of a button or a touch screen. This is an example of the control section for the purpose of simple use.
또한 조도 센서를 활용해서 밝은 곳의 컬러 배합과 주변이 어두운 상태에서의 배합, 메모리부(102) 사용자가 설정한 연령에 따라 글자와 버튼의 크기를 키워줄 것을 GUI 엔진부(105)나 스피커/녹음부(108) 등에 요청하는 기능등도 수행하게 된다.In addition, by using the light sensor, the GUI engine unit 105 or the speaker / A function for requesting the recording unit 108 and the like is also performed.
GUI 엔진부(105)는 실행 엔진/제어부(101)나 메모리부(102) 혹은 각종 기기 부가장치 제어부(103, 104, 108) 등에 의해 요청되는 미디어/메시지/정보를 표현하기 위한 그래픽과 텍스트를 컨트롤하며, 기기의 사용자와 커뮤니케이션을 담당하도록 처리하는 표시부(106)의 핵심제어를 담당한다. The GUI engine unit 105 displays graphics and text for representing media / messages / information requested by the execution engine / control unit 101, the memory unit 102, or various device attachment control units 103, 104, 108, and the like. It controls, and is responsible for the core control of the display unit 106 to handle communication with the user of the device.
사용자의 선호도에 따라 이미지/아이콘 대신 텍스트를 표현하거나, 그 반대의 경우 2D 이미지를 3D 이미지로 자동변환해서 입체감을 제공하는 역할 등을 담당하게 된다.According to the user's preference, the text is represented instead of the image / icon, or vice versa, the 2D image is automatically converted into a 3D image to provide a three-dimensional effect.
표시부(106)는 네트워크에 연결된 개인 휴대기기의 화면 영역을 의미한다. 보다 구체적으로 실행엔진부(101)에 의해 구현된 각종 미디어의 목록/상세정보/재생은 물론 각종 이벤트의 알림, 메시지 팝업, 뉴스, 공지의 노출 등이 표시되고 사용자가 입력한 각종 정보가 표시되고 전달된 결과 등이 표현되는 영역이다.The display unit 106 refers to a screen area of the personal mobile device connected to the network. More specifically, the list / detail information / playback of various media implemented by the execution engine 101 as well as notifications of various events, message pop-ups, news, and exposure of the notification are displayed, and various information input by the user are displayed. This is the area where the delivered results are expressed.
무선통신부(107)는 네트워크 연결 개인 휴대 기기가 보유한 WiFi, Cellular, Bluetooth 등을 통해 TCP/IP를 통해 연결되거나 혹은 기기별로 별도의 신호 변환 부착장치를 통해 IR과 같은 RF(Radio Frequency)를 이용, 미디어 게이트웨이(109)를 제어하기 위한 통신을 담당한다.The wireless communication unit 107 is connected via TCP / IP through WiFi, Cellular, Bluetooth, etc. owned by a network-connected personal portable device, or uses a radio frequency (RF) such as IR through a separate signal conversion attachment device for each device. It is responsible for the communication for controlling the media gateway 109.
스피커/녹음부(108)는 사용자의 휴대기기를 이용한 미디어 게이트웨이의 제어를 보다 다양하게 제공하기 위한 목적에서 제어되는 영역이다. 즉 사용자의 음성명령을 녹음, 분석해서 게이트웨이나 외부 서버에 질의를 요청하거나 GUI 엔진에 의해 구성되어 제공되고 있는 미디어의 선택/메시지의 호출/정보를 표현하는 방식을 고령자, 시각장애인,문맹인 등을 TTS 엔진을 이용 이를 휴대기기의 언어설정과 동일한 언어로 읽어주는 등의 처리를 담당한다.The speaker / recording unit 108 is an area controlled for the purpose of providing more various control of the media gateway using a user's mobile device. In other words, it is possible to record and analyze the user's voice command to request a query to the gateway or external server or to express the media selection / message call / information provided by the GUI engine. It uses the TTS engine to handle the process of reading it in the same language as the language setting of the mobile device.
미디어 게이트웨이(109)는 사용자가 보유하고 있는 휴대기기를 원격 제어기(Remote Controller)로 활용함에 있어 미디어 공급사(110) 및 외부의 서버/서비스 시스템(111) 서비스와의 중계자 역할을 담당하는 관문역할을 한다. The media gateway 109 serves as a gateway that acts as a relay between the media provider 110 and an external server / service system 111 service in using a mobile device possessed by a user as a remote controller. do.
현재 시장에 존재하고 있는 일반 셋톱박스, IPTV, SmartTV와의 차이점은 해당 기기에 대한 제어를 위해 TV와 같은 외부 디스플레이와 접속해서 제어를 하게 될 기본형 컨트롤러와 휴대용 네트워크 기기의 사용자에게 동적으로 다양한 메뉴의 구성을 제공하기 위해 기기 내부에 실행엔진부와 GUI 엔진부를 탑재하며, 사용자에게 제공되는 GUI를 별도 업데이트 과정 없이 Runtime으로 변경할 수 있다는 점이다. The difference from the general set-top box, IPTV, and SmartTV that exists in the market is that the menus are dynamically configured for users of basic controllers and portable network devices that will be connected and controlled by an external display such as a TV to control the device. It is equipped with execution engine part and GUI engine part inside the device to provide a, and the GUI provided to the user can be changed to Runtime without any additional updating process.
미디어 공급사(110)는 IPTV와 SmartTV를 제공하는 제조사 혹은 미디어의 제작 혹은 공급사와 계약을 맺고 최종 소비자에게 미디어를 공급하는 자들의 미디어 제공 서버 및 사용자 관리시스템을 의미한다. The media provider 110 refers to a media providing server and a user management system of those who provide IPTV and SmartTV or those who supply media to end consumers by making a contract with a producer or provider of media.
사용자의 휴대용 단말, 즉 원격 제어기기는 미디어 게이트웨이(109)를 매개체로 미디어 공급사(110)로부터 미디어와 데이터를 송수신하는 방법과 TCP/IP를 통해 직접 연결되어 미디어 공급사(110)로부터 미디어와 데이타를 송수신하는 방법을 선택으로 사용할 수 있다.The user's portable terminal, i.e., the remote controller, transmits and receives media and data from the media provider 110 via the media gateway 109 and is directly connected via TCP / IP to receive media and data from the media provider 110. The method of transmitting and receiving can be used as an option.
외부의 서버/서비스 시스템(111)은 공개 미디어 제공사, 포탈, SNS 서비스업자 등을 의미하며, 사용자의 휴대용 단말, 즉 원격 제어기기는 미디어 게이트웨이(109)를 매개체로 미디어 공급사(110)로부터 미디어와 데이터를 송수신하는 방법과 TCP/IP를 통해 직접 연결되어 미디어 공급사(110)로부터 미디어와 데이타를 송수신하는 방법을 선택으로 사용할 수 있다.The external server / service system 111 refers to an open media provider, a portal, an SNS service provider, and the like, and a user's portable terminal, i.e., a remote controller, is connected to the media from the media provider 110 via the media gateway 109. A method of transmitting and receiving data and a method of directly transmitting and receiving media and data from the media provider 110 by directly connecting through TCP / IP may be used.
특정 사용자 혹은 특정 미디어별 동호인들이 활동을 하는 영역과 미디어 선택 및 사용후기는 물론 미디어와의 직/간접적 정보를 공유하고 활용하기 위한 목적에서 연결이 된다.It is a connection for the purpose of sharing and utilizing direct and indirect information with the media as well as the areas in which specific users or media-specific club members work, media selection and testimonials.
도 2는 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 있어서 미디어 요청에 대한 제어 순서도이다.2 is a control flowchart of a media request in a user control of a network connected media device using a runtime engine according to the present invention.
먼저, 개인 휴대기기(21)는 미디어 게이트웨이(22)와 정해진 사전 등록절차(복수의 휴대기기에 대한 등록을 포함)를 통해 제어권을 확보하고 해당 제어권을 이용해 미디어 게이트웨이(22)에 접속한다(S201). First, the personal mobile device 21 secures a control right through the media gateway 22 and a predetermined pre-registration procedure (including registration of a plurality of mobile devices) and accesses the media gateway 22 using the control right (S201). ).
이때, 개인이 입력한 사용자와 관련된 정보나 기존의 미디어 소비 패턴, 혹은 자주 이용하던 채널 등의 정보를 기기가 저장 및 관리하도록 해서 사용자가 미디어 기기에 접속과 동시에 자신의 미디어 이용행태에 따른 최적화된 정보를 가지고 제어를 하도록 도와서 시간과 비용을 절약할 수 있다.At this time, the device stores and manages information related to the user, the existing media consumption pattern, or the channel frequently used by the individual, so that the user can access the media device and optimize it according to his / her media usage behavior. Helping you take control with your information can save you time and money.
혹은 연락처에 등록된 사용자 혹은 공개한 동호인/유명인의 미디어 북마크/사용 리포트/로그 등를 공개한 경우 해당 북마크/기록 정보를 활용해 미디어를 요청하거나 구매 등을 하는 행위를 지원하여 보다 합리적인 미디어 선택을 지원하게 할 수도 있다.Or, if you have posted a media bookmark / use report / log of a user registered in a contact or a public member / celebrity, you can request media or make a purchase using the bookmark / record information to support more rational media selection. You can also
종래의 리모트 컨트롤러의 경우 복수의 무선 주파수를 이용한 통신이기 때문에 복수의 컨트롤러가 제약 없이 동작을 함에 따라 오동작의 가능성이 존재한다. 그러나 미디어 게이트웨이(22)와 별도의 제한적 프로토콜을 이용해 통신을 하게 되는 경우 그러한 오동작을 사전에 예방할 수 있게 된다. 즉 복수 기기의 접속에 대해서는 기존 제어기 사용자의 허락 혹은 반복된 요청에 의해서만 제어권이 단수의 형태로만 사용될 수 있도록 하는 것에 따라 가능할 것이다.Since the conventional remote controller uses a plurality of radio frequencies for communication, there is a possibility of a malfunction as the plurality of controllers operate without restriction. However, when communicating with the media gateway 22 using a separate restrictive protocol, such a malfunction can be prevented in advance. In other words, the connection rights of the multiple devices may be possible by allowing the control right to be used in the singular form only by the permission or repeated request of the existing controller user.
미디어 라이브러리를 요청하는 경우 해당 미디어 게이트웨이(22)에서는 요청된 사용자(혹은 복수의 기기)가 전달하는 정보를 식별하거나 해당 개인 휴대기기(21)가 마지막으로 요청하여 전달해준 미디어목록을 그대로 내려준다(S202). When requesting a media library, the media gateway 22 identifies the information delivered by the requested user (or a plurality of devices) or lowers the media list last requested and delivered by the personal mobile device 21 ( S202).
이때 미디어 게이트웨이(22)는 별도의 연산절차 없이 단일 혹은 복수의 미디어 시청자들의 개별화된 미디어 선호 정보를 제공할 수 있게 된다.In this case, the media gateway 22 may provide personalized media preference information of a single or a plurality of media viewers without a separate operation procedure.
미디어 게이트웨이(22)는 동영상 플레이어를 이용하여 주로 PC로 시청하는 인터넷 TV, 프리미엄 인터넷 망으로 방송 전송(VOD/MOD)하는 IPTV, 기존 TV에 인터넷 연결기능을 추가하여 제조사에서 제공하는 Connected TV, 동영상 플레이를 STB에 통합한 N-Screen 연동의 STB형 스마트 TV 및 TV와 개방형 어플리케이션 N-Screen 연동의 일체형 스마트 TV와 같이 분류될 수 있다. The media gateway 22 is an Internet TV mainly watched on a PC using a video player, an IPTV broadcasted on a premium Internet network (VOD / MOD), and a connected TV provided by a manufacturer by adding an Internet connection function to an existing TV. It can be classified into N-Screen-linked STB-type smart TVs and TVs incorporating play into STBs, and integrated smart TVs with N-Screen-linked open applications.
위의 다양한 미디어 게이트웨이(22) 중에서 인터넷 TV에서 주로 사용되는 PC와 같은 고성능 운영체제, 일체형 스마트 TV영역인 chrome OS와 같은 기기는 사용자의 선호 미디어나 미디어 이용 환경/방식 등을 저장하거나 관리하고, 이러한 정보들을 송수신할 수 있는 agent 소프트웨어의 탑재가 용이하지만, 점차 복수의 화면 즉 N-Screen 환경에서 사용자가 특정 기기 하나만을 가지고 미디어 소비를 가정하는 것은 현실적이지 못한 상황이다. 이에 따라 특정 기기에서 보고 있던 미디어를 다른 기기에서도 이어서 볼 수 있다는 수준을 넘어 사용자들의 미디어 제어와 자신이 선호하는 메뉴와 미디어 재생에 필요한 컨트롤 구성을 언제 어디서나 지속적으로 사용할 수 있도록 하여야 한다. Among the various media gateways 22, a device such as a high-performance operating system such as a PC mainly used in Internet TV and a chrome OS, which is an integrated smart TV area, stores or manages a user's preferred media or media usage environment / method. Although it is easy to install agent software that can transmit and receive information, it is not practical to assume that a user consumes only one specific device in a plurality of screens, that is, N-screen environment. As a result, media that were viewed on one device can be continuously viewed on other devices, and the user should be able to continuously use the control configuration necessary for users' media control and their favorite menus and media playback anytime, anywhere.
이를 위해 PC 일체형/셋탑박스형의 스마트 TV는 물론 IPTV용 셋탑박스, TV 에 도 1에서의 센서부(103), GUI 엔진부(105), 표시부(106)의 기능을 활성할 수 있는 런타임 기반의 엔진을 탑재하여 사용자별로 최적화되고 사용자의 이용 기록에 근거한 미디어 소비를 위한 화면 제공 기능을 지원한다(S203).To this end, a PC-based / set-top box type smart TV, as well as an IPTV set-top box, a TV, a runtime-based system that can activate the functions of the sensor unit 103, the GUI engine unit 105, and the display unit 106 in FIG. It is equipped with an engine and optimized for each user and supports a screen providing function for media consumption based on the user's usage record (S203).
미디어 공급사(23) 영역에서도 기존까지 미디어 공급사(23)은 TV를 이용하던 PC를 이용하던 미디어의 소비자에 대한 기준은 PC 혹은 셋탑박스 단위였다. N-Screen이 제기되는 최근에 비로소 기기단위에서 소비자들의 휴대용 네트워크 기기까지를 개별 식별해서 소비자가 이용하던 미디어를 연속해서 사용할 수 있도록 지원을 하고 있다. 그러나 아직까지 소비자가 보고 있던 미디어, 구매한 미디어를 구별해 주는 수준이며 본 발명을 통해 구성하는 시스템은 아래와 같은 두 가지 영역에서 근본적으로 다르게 접근을 하고 있다.In the area of the media supplier 23, the media provider 23 has previously used the PC or set-top box unit as a standard for the consumer of the media using a TV or a PC. Recently, when N-Screen is raised, it is individually identifying each device from the device unit to the portable network device of the consumer to support the continuous use of the media used by the consumer. However, it is still a level that distinguishes the media that consumers have seen and purchased media, and the system configured through the present invention is approaching fundamentally different in the following two areas.
첫째, 미디어 소비자의 개별 기기를 각각 별도의 식별자로 관리, 해당 디바이스가 선호하는 미디어, 구매한 미디어, 해당 미디어를 시청할 때의 음향/화질의 설정 등 정보를 관리, 사용자에게 이를 제공한다는 점에서 종래의 미디어 제공 방식과 구별된다.First, it manages individual devices of media consumers with separate identifiers, manages information such as media preferred by the device, purchased media, and setting the sound / quality when watching the media. Is distinguished from the media delivery method.
둘째, 이를 통해 IPTV의 장점으로 이야기되고 있는 양방향이라는 장점이 미디어 공급사와 소비자와의 1:N 양방향이 아닌, 공급사는 물론 다른 미디어 소비자, 불특정 다수가 아닌 같은 지역, 같은 게이트웨이 접속 사용자, 혹은 SNS로 연결되어 있는 친구, 동료들 이라는 점까지를 대상으로 하게 된다는 N:N 양방향 서비스라는 점에서 종래의 방식과 구별된다(S204).Secondly, the two-way advantage, which is said to be the advantage of IPTV, is not a 1: N two-way between media provider and consumer, but also to the supplier as well as to other media consumers, to the same region, to the same region, to the same gateway access user, or to SNS. It is distinguished from the conventional method in that it is an N: N bidirectional service that targets the point of being friends and colleagues connected (S204).
위의 S204에서 설명되었듯이 미디어 공급사:미디어 소비자와의 관계가 기존의 1:N의 방식에서 N (미디어 소비자):N(복수의 미디어 공급사/복수의 SNS 등 서비스 제공사)로 구성이 된다(S205). As described in S204 above, the relationship with the media provider: media consumer is composed of N (media consumer): N (multiple media providers / multiple SNS service providers, etc.) in the conventional 1: N manner (S205). ).
그간 TV와 같은 미디어 기기의 화면은 일반적으로 미디어 공급사(23)가 제공하는 그래픽 사용자 인터페이스(GUI)와 이 위에 제공되는 '방송시간표/편성표'로 불리우는 EPG(Electric Program Guide)가 전부였다. 일체형 스마트 TV에서는 사용자별로 '테마'를 선택 자신만의 GUI를 설정/저장/호출해서 이용할 수 있도록 제공하고 있으나 이 역시 아직까지는 미디어 게이트웨이(22) 단위의 설정이 가능한 수준이다.In the meantime, the screen of a media device such as a TV is generally a graphic user interface (GUI) provided by the media provider 23 and an electric program guide (EPG) called 'broadcast schedule / combination table' provided thereon. All-in-one smart TV provides 'users' by setting the user's own GUI to set / save / call to use, but this is still a level that can be set in the media gateway (22) unit.
복수의 미디어 게이트웨이(22) 사용자들이 자신만의 환경을 저장하고 호출하기 위해서는 로그인/로그아웃의 불편한 절차를 거쳐야만 가능하기 때문이다. This is because a plurality of media gateways 22 users need to go through an inconvenient procedure of logging in and out to store and recall their own environment.
이에 사용자의 개인 휴대기기(21)와 미디어 게이트웨이(22) 혹은 미디어 공급사(23)와의 통신을 통해 자신의 기호/연령/시간/감성의 상태에 따라 각기 다른 사용자 인터페이스를 TV와 같은 외부 디스플레이 화면과 자신의 개인 휴대기기(21)에서 동시에 확인하거나, 혹은 개별로 자신의 개인 휴대기기(21)에 제공받을 수 있도록 개인 휴대기기(21)의 GUI 실행엔진을 탑재하게 된다(S206). Accordingly, through the communication between the user's personal mobile device 21 and the media gateway 22 or the media provider 23, different user interfaces according to their preference / age / time / sensitivity state can be connected to an external display screen such as a TV. At the same time, the GUI execution engine of the personal mobile device 21 is mounted so that the user's personal mobile device 21 can be simultaneously checked or individually provided to the personal mobile device 21 (S206).
다음으로 S207 내지 S209 항목들은 개인 휴대기기(21) 혹은 미디어 게이트웨이(22)의 런타임 엔진에서 구동되는 (1) 외부 비즈니스 로직의 수행과 처리를 담당하는 부문(도 1의 실행 엔진/제어부(101))과 (2) 사용자의 경험/기호/위치/감정의 상태 등에 따라 외부 디스플레이나 개인 휴대기기(21)의 GUI를 개인화해서 제공하게 되는 GUI 동적 구성부문(도 1의 GUI 엔진부(105))과 (3) 이러한 지능적이고 방대한 데이터의 송수신을 담당하는 정보 에이전트 부문과 관련된 사항이다.Next, the S207 to S209 items are in charge of the execution and processing of (1) external business logic driven by the runtime engine of the personal mobile device 21 or the media gateway 22 (the execution engine / control unit 101 of FIG. 1). ) And (2) GUI dynamic components (GUI engine 105 of FIG. 1) to personalize and provide a GUI of an external display or personal mobile device 21 according to the user's experience / symbol / location / emotion status and the like. And (3) related to the information agent sector responsible for the transmission and reception of such intelligent and massive data.
사용자 개인 휴대기기(21)의 정보 에이전트는 자신이 선택한 미디어의 분류정보/채널정보/평가정보/소비한 미디어 종류에 대한 정보/시점 정보 등 관련 정보를 비교적 단기간 저장/관리하게 된다. 또한 미디어에 대한 상세정보나 관련 이미지/동영상 클립 등의 정보는 미디어 게이트웨이(22)를 통해 S208에게 요청한다. The information agent of the user's personal portable device 21 stores / manages related information such as classification information / channel information / evaluation information / information / time information on the type of media consumed for a relatively short period of time. In addition, the detailed information about the media or related images / video clips, etc. are requested to S208 through the media gateway 22.
또한 어플리케이션의 초기화 등에 경우에는 S208에 저장되어 있는 데이터를 수신하며, 다른 사용자/가족의 정보 에이전트와 정보를 송수신할 수 있다(S207). In addition, when the application is initialized or the like, data stored in S208 may be received and information may be transmitted and received with an information agent of another user / family (S207).
미디어 공급자(23)는 미디어 게이트웨이(22) 단위, 혹은 최종 사용자 개인 휴대기기(21) 단위와 통신을 통해 정보 에이전트가 전송한 각종 정보를 로그 형태로 기록/저장한다. 단 사용자의 저장동의가 존재하는 경우에만 이를 저장/관리한다. The media provider 23 records / stores various information transmitted by the information agent in a log form through communication with the media gateway 22 unit or the end user personal mobile device 21 unit. Only if the user's storage agreement exists, it is saved / managed.
또한 사용자가 개인 휴대기기(21)를 변경하거나 새로운 단말을 사용할 경우 기존 정보를 해당 개인 휴대기기(21)에 제공하는 등의 부가적 정보를 제공하게 된다. 미디어 공급자(23)는 미디어 게이트웨이(22) 뿐만이 아니라 최종 소비자 개인 휴대기기(21) 단위의 기호와 미디어 소비 이력을 분석해서 사용자가 보다 나은 미디어를 선택할 수 있도록 돕는데 활용된다(S208).In addition, when the user changes the personal portable device 21 or uses a new terminal, additional information such as providing existing information to the personal portable device 21 is provided. The media provider 23 analyzes not only the media gateway 22 but also the preferences and the media consumption history of the unit of the end consumer personal mobile device 21 to help the user select a better media (S208).
서로 온라인상에서 친구 관계를 맺은 경우 SNS시스템(24)은 관계된 상대방의 온라인 상의 활동을 다른 친구들에게 알림으로써 상호간의 개입의 여지를 확대하고 있다. 이러한 점을 착안 나 혹은 나와 관계를 맺고 있는 사용자가 현재 시청을 하고 있거나 시청을 했던 미디어에 대한 정보를 관련인들에게 제공함으로써 미디어에 대한 합리적 판단과 선택을 돕도록 한다. 또한 특정 미디어에 대한 상세정보 조회단계에서 해당 미디어에 대한 동료, 혹은 관련 분야 전문가의 평가 등을 참고하도록 지원할 수 있다(S209).In the case of making a friend relationship online with each other, the SNS system 24 expands the room for mutual intervention by informing other friends of online activities of the related party. With this in mind, users who have a relationship with me or who have a relationship with me are provided with information about the media they are currently watching or watched to help them make rational judgments and choices about the media. In addition, the detailed information inquiry step for a specific media can be supported to refer to the evaluation of peers or experts in the relevant field (S209).
도 3은 본 발명에 따른 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 있어서 이벤트 참여 및 통지에 대한 제어 순서도이다. 3 is a control flowchart of event participation and notification in user control of a network connected media device using a runtime engine according to the present invention.
자신의 기본 정보에 대한 설정(입력이 아닌, 미디어 소비/선택이력 및 이벤트 참여 이력에 기초)을 통해 저장된 기본 값과 위치, SNS로 관계를 맺고 있는 다른 사용자와의 관계 등 동적 요소가 결합되어 저장되고, 이를 통해 외부 이벤트에 대한 반응을 자신의 기호/여건에 따라 조절할 수 있도록 하는 저장/동적 반응과 관련된 데이터를 저장하게 된다(자기 정보 설정, S301).Combining and storing dynamic elements such as the default value and location stored through the setting of basic information (based on media consumption / selection history and event participation history, not input), and the relationship with other users connected to SNS In this way, the data related to the storage / dynamic reaction, which allows the response to the external event to be adjusted according to the user's preference / condition, is stored (self information setting, S301).
S301로부터 받아 들이는 사용자 개인의 참여/기호/위치 등 동적 조건과 특정 미디어 게이트웨이(32)에 접속되어 사용중인 사용자 그룹, 게이트웨이 대역대의 그룹 등 다양한 그룹에 대한 이벤트(광고, 퀴즈, 공동구매, 오프라인 행사에 대한 알림 등)을 통지하거나 참여를 조직할 수 있다(S302). Dynamic conditions such as user's personal participation / symbol / location received from S301 and events for various groups such as user groups in use by accessing a specific media gateway 32 and groups of gateway bands (advertisement, quiz, co-purchase, offline) Notifications of events, etc.) can be notified or participation can be organized (S302).
많은 사용자들이 복수의 개인 휴대기기(31)를 사용한다. 이런 경우 각기 다르게 기기에 반응할 수도 있으나, 그렇지 않고 동일하게 반응하고자 할 경우, 사용자가 보유한 각 장치의 특성(단말기 해상도, 충격-동작센서 유무 등)에 따라 호환 가능한 데이터를 추출, 복수의 개인 휴개기기(31)를 이용해 미디어 게이트웨이(32)를 조작할 수 있도록 변환을 지원한다(S303).Many users use a plurality of personal mobile devices 31. In this case, the device may react differently to each other, but if the user wants to react in the same way, the compatible data is extracted according to the characteristics of each device (terminal resolution, impact-motion sensor, etc.) of the user. Conversion is supported so that the media gateway 32 can be manipulated using the device 31 (S303).
미디어 게이트웨이(32)는 자신에게 연결된 사용자와 연결된 또 다른 사용자로부터 온 요청이나, 미디어 공급사(33)로부터 요청된 이벤트에 대해 자신에게 연결된 단수 혹은 복수의 사용자와의 연결을 유지해 주거나, 단순한 데이터 중계 역할을 담당한다(S304). The media gateway 32 maintains a connection with one or more users connected to the user for a request from another user connected to the user connected to the user, an event requested from the media provider 33, or serves as a simple data relay. It is in charge (S304).
즉 특정인은 미디어를 시청하는 동안에는 어떤 형태의 이벤트에 대한 참여 없이 오로지 미디어 소비에만 집중하고자 한다면 관련된 이벤트를 전달하지 않도록 해야 한다는 것이다. 이러한 개별화된 정보를 미디어 공급사(33)들이 모두 제어를 하게 된다면 이는 많은 부하가 불가피하므로 미디어 게이트웨이(32)는 요청된 이벤트를 수신하고 이를 전달하는 과정에서 현재 미디어 게이트웨이(32)를 제어하고 있는 사용자에게는 특정 이벤트만을 전달하도록 한다거나 복수의 사용자들이 하나의 게이트웨이를 이용해 미디어를 시청하고 있는 경우라면 특정인의 개인 휴대기기(31)에만 이벤트 정보를 제공하게 된다. In other words, while watching a media, if a specific person wants to focus on media consumption without participating in any type of event, he or she should not deliver the related event. If the media provider 33 controls all of this personalized information, it is inevitable that a lot of load is inevitable. Therefore, the media gateway 32 receives the requested event and delivers the requested event to the user who is currently controlling the media gateway 32. If only a specific event is to be delivered or if a plurality of users are watching media using a single gateway, the event information is provided only to the personal mobile device 31 of a specific person.
즉 미디어 게이트웨이(32) 단계에서의 이벤트 컨트롤 기능을 통해 사용자에게 불필요한 이벤트를 전달하지 않도록 하거나, 역으로 다양한 이벤트를 제공, 보다 활발한 네트워크가 결합된 미디어 소비를 도울 수 있다.That is, the event control function in the media gateway 32 step may prevent the user from transmitting unnecessary events, or inversely, provide various events to help media consumption combined with a more active network.
S304에서 미디어 게이트웨이(32)를 통해 이벤트를 컨트롤하는 경우가 바람직하지만 미디어 게이트웨이(32)가 이벤트를 컨트롤한다고 하더라도 그 이벤트에 대한 참여여부는 미디어 소비자 최종개인의 판단에 따른다. 그렇기 때문에 외부의 이벤트에 대해 반응하거나 혹은 반응하지 않도록 사용자 개인 휴대기기(31) 레벨에서 외부 메시지에 대해 통제 기능을 제공, 사용자 기호에 따라 미디어를 소비할 수 있도록 지원한다(S305).Although it is preferable to control the event through the media gateway 32 in S304, even if the media gateway 32 controls the event, participation in the event is at the discretion of the media consumer end individual. Therefore, it provides a control function for the external message at the level of the user's personal mobile device 31 so as not to respond to or react to external events, thereby supporting media consumption according to user preferences (S305).
이벤트에 대한 반응은 다양한 형태로 제어를 할 필요가 있다. 즉 전자 상거래와 관련된 기능을 제공하는 경우라도 미성년자의 가족이 고가의 물품을 구매하지 못하도록 원천적으로 차단을 하는 등의 필요가 존재한다. 즉 경제적 구매 능력이 없는 대상의 사용자 장치로 이벤트가 통지될 때 해당 이벤트에 반응하지 않거나, 혹은 반응이 불가능하도록 또 다른 사용자에 의해 차단하도록 지원한다. 혹은 이벤트 발신자가 특정 미디어를 시청한 사용자, 혹은 자신의 성별을 특정 성별이나 연령대로 설정한 사용자에게만 배포한 경우로 이벤트 반응을 제어할 수 있다(S306).Response to events needs to be controlled in various forms. In other words, even in the case of providing functions related to electronic commerce, there is a necessity of blocking the purchase of expensive goods by the family of minors. In other words, when an event is notified to a user device of a target that does not have economic purchasing ability, the user may be prevented from responding to the event or blocked by another user. Alternatively, the event response may be controlled when the event sender distributes only to a user who watches a specific media or a user who sets his or her gender to a specific gender or age (S306).
최종 사용자 개인 휴대기기(31) 혹은 미디어 게이트웨이(32)를 통해 전달되는 이벤트에 대한 각종 연산 및 데이터 송수신 관련 제어는 아래와 같다. Various operations related to the event transmitted through the end user personal mobile device 31 or the media gateway 32 and control related to data transmission and reception are as follows.
수신된 이벤트에 대한 사용자의 회신과 관련되어 사용자의 네트워크 환경이나 조건에 따라 회신의 시점이 다를 수 있다. In response to the user's reply to the received event, the timing of the reply may vary depending on the user's network environment or conditions.
이로 인해 퀴즈나 선착순 이벤트와 같은 경우 사용자의 회신이 실제로 이벤트를 발생시킨 미디어 공급자(33) 서버나 외부의 서비스 시스템에 도달하는 시간이 다를 수 있다는 점을 고려하여 이를 일치시키기 위한 방법은 다음과 같다.Because of this, in the case of a quiz or first-come-first-served event, the method for matching the user's reply may be different, considering that the time to reach the media provider 33 server or the external service system that actually generated the event may be different. .
외부의 이벤트 메시지/데이터는 다수의 미디어 게이트웨이(32) 혹은 사용자 개인 휴대기기(31)에 네트워크 환경에 따라 각각 다른 시점에 전달될 수 있다. 이로 인해 빠른 시간내에 응답을 해야 하는 이벤트나 선착순 이벤트와 같은 경우, 마감시각이 엄격한 이벤트 등 시간이 중요한 요소를 차지하는 이벤트와 관련된 방법의 공정성을 얻기 위한 방법이다.The external event message / data may be delivered to the plurality of media gateways 32 or the user's personal portable device 31 at different times according to the network environment. For this reason, in case of events that need to be responded to in a short time or on a first-come, first-served basis, this is a method to obtain fairness of the method related to the event that time is important factor such as a strict deadline event.
즉 이벤트 메시지/데이터에 해당 게이트웨이 혹은 최종 단말에 해당 메시지가 미리 전달된다고 하더라도 사용자에게 통지되는 시각정보를 포함하여 전달, 해당 시각이 되어서야 비로서 메시지/데이터가 Open되도록 스케쥴 정보를 포함하여 전달한다(S307).That is, even if the corresponding message is previously delivered to the corresponding gateway or end terminal in the event message / data, the message is delivered with the time information notified to the user, and the schedule information is transmitted so that the message / data is opened only when the time is reached ( S307).
미디어 게이트웨이(32)는 미디어 공급자(33) 서버/이벤트 서버로부터 제공된 메시지를 요청된 시점에 TV나 외부 디스플레이에 노출을 하거나, 사용자 디바이스에 전달/Open 명령어를 제어하는 역할을 담당하고, 마찬가지로 최종 디바이스의 이벤트에 대한 회신(혹은 퀴즈나 선착순에 대한 응답 등)의 경우 미디어 게이트웨이(32)에 도착한 시점을 미디어 게이트웨이(32)의 time stamp를 기록해서 서버에 도착한 경우 이 time stamp를 기준으로 순위 등을 정해 공정성 혹은 균형을 유지하도록 중간 역할을 담당한다(S308). The media gateway 32 is responsible for exposing the message provided from the media provider 33 server / event server to the TV or external display at the requested time, or controlling the delivery / open command to the user device, and the final device as well. In the case of replying to an event of (or responding to a quiz or first-come-first-served basis, etc.), when the media gateway 32 arrives at the server and records the time stamp of the media gateway 32 and arrives at the server, the ranking is based on the time stamp. Determination plays an intermediate role to maintain fairness or balance (S308).
사용자 휴대기기(31)는 외부 시스템(미디어 공급자(33))이나 미디어 게이트웨이(32)에 포함되어 있는 메시지 제어명령에 따라 메시지의 수신/Open/회신 및 삭제 등의 수행을 담당한다(S309).The user portable device 31 is responsible for receiving / opening / replying and deleting a message according to a message control command included in an external system (media provider 33) or media gateway 32 (S309).
상술한 본 발명의 기술적 구성은 본 발명이 속하는 기술 분야의 당업자가 본 발명의 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해되어야 하고, 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The technical configuration of the present invention described above will be understood by those skilled in the art that the present invention can be implemented in other specific forms without changing the technical spirit or essential features of the present invention. Therefore, the embodiments described above are to be understood as illustrative and not restrictive in all respects, and the scope of the present invention is indicated by the following claims rather than the detailed description, and the meaning and scope of the claims and All changes or modifications derived from the equivalent concept should be interpreted as being included in the scope of the present invention.

Claims (8)

  1. 디스플레이 장치를 제공하는 제조사, 미디어 공급사, 상기 미디어 공급사와 계약을 맺고 최종 소비자에게 미디어를 공급하는 포탈 또는 SNS(Social Network Service) 제공자 중 어느 하나이며 미디어 게이트웨이 또는 개인 휴대기기와 유무선망으로 연결된 하나 이상의 미디어 제공자와; One or more of the manufacturers, media providers, and / or portal or social network service (SNS) providers that contract with the media suppliers and provide media to end consumers, and are connected to the media gateway or personal mobile device by wire or wireless network. A media provider;
    사용자가 보유하고 있는 개인 휴대기기를 원격 제어기로 활용함에 있어 상기 미디어 제공자와의 중계자 역할을 담당하며, 상기 개인 휴대기기의 제어를 받기 위해 외부 디스플레이와 접속하여 제어를 수행하는 컨트롤러와, 상기 개인 휴대기기의 사용자에게 동적으로 다양한 메뉴의 구성을 제공하기 위한 실행엔진부와, GUI (Graphic User Interface) 엔진부를 탑재하는 하나 이상의 미디어 게이트웨이와; A controller that plays a role of a relay with the media provider in using a personal mobile device possessed by a user as a remote controller, and connects to an external display to control the personal mobile device, and controls the personal mobile device. At least one media gateway equipped with an execution engine unit for dynamically providing various menu configurations to a user of the device, and a graphical user interface (GUI) engine unit;
    상기 미디어 제공자 또는 미디어 게이트웨이로부터 송수신되는 데이터 제어, 미디어의 채널 선택, 상세 정보 요청, 음향을 조절하는 등의 원격조절이 가능하도록 제어하고, 다른 사용자들의 단말에 설치된 어플리케이션과 데이터를 교환하는 실행 엔진/제어부와, 운영체제에서 구동되기 위한 실행엔진을 저장 및 데이터를 저장하는 메모리부와, 자신의 위치정보의 설정 및 이를 통해 각종 이벤트나 정보를 송수신할 수 있도록 제어하는 GPS/위치 인식부, 화면 영역인 표시부와, 미디어 게이트웨이를 제어하기 위한 통신을 담당하는 무선통신부를 포함하는 하나 이상의 개인 휴대기기로 이루어지는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템.Execution engine for controlling data to be transmitted / received from the media provider or media gateway, selecting a channel of media, requesting detailed information, adjusting sound, etc., and exchanging data with an application installed in a terminal of other users / A control unit, a memory unit for storing an execution engine for running in an operating system and storing data, a GPS / location recognition unit for controlling the setting of its own location information and transmitting / receiving various events or information therethrough, A control system for user control of a network-connected media device using a run-time engine, comprising one or more personal portable devices including a display unit and a wireless communication unit in charge of controlling the media gateway.
  2. 제1항에 있어서,The method of claim 1,
    상기 개인 휴대기기는,The personal mobile device,
    상기 개인 휴대기기가 보유하고 있는 각종 부가장치들을 통한 입출력 부문을 담당하는 속도센서, 진동센서, 방향센서, 가속도센서, 터치센서 또는 조도센서중 하나 이상을 포함하는 센서부와,A sensor unit including at least one of a speed sensor, a vibration sensor, a direction sensor, an acceleration sensor, a touch sensor, and an illuminance sensor in charge of input / output through various additional devices possessed by the personal portable device;
    요청되는 미디어/메시지/정보를 표현하기 위한 그래픽과 텍스트를 컨트롤하며, 기기의 사용자와 커뮤니케이션을 담당하도록 처리하는 표시부의 표시 제어를 담당하는 GUI 엔진부를 더 포함하는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템. A network-connected media device using the runtime engine, which further comprises a GUI engine that controls graphics and text for representing the requested media / messages / information and controls the display of the display unit which is in charge of communicating with the user of the device. Control system for the user control of the.
  3. 제1항에 있어서,The method of claim 1,
    상기 개인 휴대기기는 상기 미디어 게이트웨이와 정해진 사전 등록절차를 통해 제어권을 확보하고 해당 제어권을 이용해 상기 미디어 게이트웨이에 접속하고,The personal mobile device secures a control right through a predetermined pre-registration procedure with the media gateway, and accesses the media gateway using the control right.
    상기 개인 휴대기기로부터 미디어 라이브러리를 요청하는 경우 상기 미디어 게이트웨이에서는 요청된 사용자가 전달하는 정보를 식별하거나 해당 개인 휴대기기가 마지막으로 요청하여 전달해준 미디어 목록을 송신하는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템. When requesting a media library from the personal mobile device, the media gateway identifies the information delivered by the requested user or transmits a media list last requested and delivered by the personal mobile device. Control system for the user control of the.
  4. 제1항에 있어서,The method of claim 1,
    상기 미디어 게이트웨이는 상기 미디어 제공자는 물론 다른 미디어 소비자, 불특정 다수가 아닌 같은 지역, 같은 미디어 게이트웨이 접속 사용자, 혹은 SNS(Social Networking Service)로 연결되어 있는 지인까지를 통신 대상으로 설정하여 다수(복수의 미디어 소비자) : 다수(복수의 미디어 제공자)의 양방향 서비스를 제공하는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템. The media gateway sets a communication target by not only the media provider but also other media consumers, an unspecified region, the same region, the same media gateway access user, or an acquaintance connected to an SNS (Social Networking Service). Consumer): A control system for user control of a network-connected media device using a runtime engine that provides a bidirectional service of multiple (multiple media providers).
  5. 제1항에 있어서,The method of claim 1,
    상기 개인 휴대기기는 내장된 정보 에이전트를 통해 자신이 선택한 미디어의 분류정보/채널정보/평가정보/소비한 미디어 종류에 대한 정보/시점 정보 등 관련 정보를 저장 및 관리하며, 그 관련 정보를 상기 미디어 제공자 또는 미디어 게이트웨이로 전송하고, The personal mobile device stores and manages related information such as classification information / channel information / evaluation information / information / time information on the type of media consumed by the embedded information agent and stores the related information. Send it to your provider or media gateway,
    상기 미디어 제공자는 상기 미디어 게이트웨이 단위 또은 개인 휴대기기 단위와 통신을 통해 상기 정보 에이전트가 전송한 각종 정보를 로그 형태로 기록 및 저장하는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템.The media provider records and stores various information transmitted by the information agent in a log form through communication with the media gateway unit or a personal portable device unit, and controls a user control of a network-connected media device using a runtime engine.
  6. 제1항에 있어서,The method of claim 1,
    상기 개인 휴대기기는 직접입력이 아닌 미디어 소비/선택이력 및 이벤트 참여 이력에 기초하여 기본 값과 위치, SNS로 관계를 맺고 있는 다른 사용자와의 관계 등 동적 요소가 결합되어 저장되고, 이를 통해 외부 이벤트에 대한 반응을 자신의 기호/여건에 따라 조절할 수 있도록 하는 저장/동적 반응과 관련된 데이터를 저장하는 자기 정보 설정이 자동으로 설정되는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템.The personal mobile device stores and stores dynamic elements such as basic value, location, and relationship with other users who have a relationship with SNS based on media consumption / selection history and event participation history instead of direct input. A control system for user control of a network-connected media device using a runtime engine, in which self-information settings are automatically set for storing data related to storage / dynamic reactions, allowing the response to the user to their preferences / conditions.
  7. 제6항에 있어서,The method of claim 6,
    상기 개인 휴대기기는 상기 자기 정보 설정에 따라 특정 미디어 게이트웨이에 접속되어 사용중인 사용자 그룹, 특정 미디어 게이트웨이 대역대의 그룹에 대한 이벤트을 통지하거나 참여를 조직할 수 있는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템.The personal mobile device is a user of a network-connected media device using a runtime engine, which can connect to a specific media gateway and notify or organize an event for a group of users in use and a group of a specific media gateway band according to the magnetic information setting. Control system for control.
  8. 제1항에 있어서,The method of claim 1,
    상기 미디어 게이트웨이는 상기 미디어 제공자로부터 제공된 메시지를 요청된 시점에 디스플레이에 표시하거나, 상기 개인 휴대기기에 전달 및 오픈(Open) 명령어를 제어하는 역할을 담당하는, 런타임 엔진을 이용한 네트워크 접속 미디어 기기의 사용자 컨트롤에 대한 제어 시스템.The media gateway is a user of a network connected media device using a runtime engine, which is responsible for displaying a message provided from the media provider on a display at a requested time point or controlling a transfer and open command to the personal mobile device. Control system for the control.
PCT/KR2012/004154 2011-05-25 2012-05-25 Control system for a user control of a network access media device using a run-time engine WO2012161546A2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2011-0049334 2011-05-25
KR1020110049334A KR101263231B1 (en) 2011-05-25 2011-05-25 Controller for user control of networking media device using run-time engine

Publications (2)

Publication Number Publication Date
WO2012161546A2 true WO2012161546A2 (en) 2012-11-29
WO2012161546A3 WO2012161546A3 (en) 2013-03-21

Family

ID=47217924

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2012/004154 WO2012161546A2 (en) 2011-05-25 2012-05-25 Control system for a user control of a network access media device using a run-time engine

Country Status (2)

Country Link
KR (1) KR101263231B1 (en)
WO (1) WO2012161546A2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533415A (en) * 2013-10-12 2014-01-22 青岛旲天下智能科技有限公司 Internet television system based on sound control man-machine interaction technology and implementation method thereof

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9013510B2 (en) 2011-07-29 2015-04-21 Google Inc. Systems and methods for rendering user interface elements in accordance with a device type

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030095525A1 (en) * 2000-04-13 2003-05-22 Daniel Lavin Navigation control unit for a wireless computer resource access device, such as a wireless web content access device
US20070219856A1 (en) * 2006-03-14 2007-09-20 Comcast Cable Holdings, Llc Method and system of recommending television programs
US20100144327A1 (en) * 2008-12-08 2010-06-10 At&T Intellectual Property I, L.P. Method and apparatus for presenting a user interface

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100946141B1 (en) * 2008-04-02 2010-03-10 브로드밴드미디어주식회사 Method for displaying menu in internet protocol television service and set-top box for materializing the same

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030095525A1 (en) * 2000-04-13 2003-05-22 Daniel Lavin Navigation control unit for a wireless computer resource access device, such as a wireless web content access device
US20070219856A1 (en) * 2006-03-14 2007-09-20 Comcast Cable Holdings, Llc Method and system of recommending television programs
US20100144327A1 (en) * 2008-12-08 2010-06-10 At&T Intellectual Property I, L.P. Method and apparatus for presenting a user interface

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533415A (en) * 2013-10-12 2014-01-22 青岛旲天下智能科技有限公司 Internet television system based on sound control man-machine interaction technology and implementation method thereof
CN103533415B (en) * 2013-10-12 2016-09-14 青岛旲天下智能科技有限公司 Internet television system based on sound control man-machine interaction technology and its implementation

Also Published As

Publication number Publication date
KR101263231B1 (en) 2013-05-10
KR20120132648A (en) 2012-12-07
WO2012161546A3 (en) 2013-03-21

Similar Documents

Publication Publication Date Title
KR101871738B1 (en) Systems and methods for providing companion services to customer premises equipment using an ip-based infrastructure
CN101682708B (en) User defined rules for assigning destinations of content
US9800940B2 (en) Method and apparatus for automatic sharing and change of TV channel information in a social networking service
CN104718538B (en) For the system and method for the playback for managing streaming digital content
US20100241699A1 (en) Device-Based Control System
WO2012005286A1 (en) Operation information transfer server, operation information transfer system, and operation information transfer method
CN101594519A (en) Polymerization, standardization and extension of social networking contacts are to strengthen television consumer experience
KR101642550B1 (en) Network system and method of operation thereof
WO2013130679A1 (en) Interaction of user devices and servers in an environment
CN106385621A (en) Intelligent device control method and device
JP6258475B2 (en) Method for providing media assets to client devices
WO2014196076A1 (en) Terminal, electronic device login setting information input method, computer-readable information recording medium, and electronic device
GB2483092A (en) A converged home network with context based delivery
CN104754370B (en) Multimedia data transmission method, device, client and the system of cross-terminal
JP2014049883A (en) Information processing device, information processing method, digital television receiver, and storage medium
JP2019191751A (en) Peripheral device, communication system, central control unit, communication method and communication program
CN104125499B (en) Method and device for playing television programs
CN109039872A (en) Exchange method, device, electronic equipment and the storage medium of Instant audio messages
KR101633901B1 (en) Live broadcasting service method by using social network
JP2010287030A (en) Content distribution system and content reproduction device
CN109983777A (en) Enable media orchestration
WO2012161546A2 (en) Control system for a user control of a network access media device using a run-time engine
CN105554561A (en) Method and device for joining group
Yusufov et al. Roles of smart TV in IoT-environments: A survey
TWI551130B (en) Personalized video content consumption using shared video device and personal device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12789060

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12789060

Country of ref document: EP

Kind code of ref document: A2