KR102594608B1 - 하이브리드 유저 인터페이스 제공 시스템 및 그 방법 - Google Patents

하이브리드 유저 인터페이스 제공 시스템 및 그 방법 Download PDF

Info

Publication number
KR102594608B1
KR102594608B1 KR1020160164760A KR20160164760A KR102594608B1 KR 102594608 B1 KR102594608 B1 KR 102594608B1 KR 1020160164760 A KR1020160164760 A KR 1020160164760A KR 20160164760 A KR20160164760 A KR 20160164760A KR 102594608 B1 KR102594608 B1 KR 102594608B1
Authority
KR
South Korea
Prior art keywords
resource
resources
terminal device
content
subscriber terminal
Prior art date
Application number
KR1020160164760A
Other languages
English (en)
Other versions
KR20180064647A (ko
Inventor
송문규
김우혁
정현일
Original Assignee
주식회사 알티캐스트
주식회사 알티미디어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 알티캐스트, 주식회사 알티미디어 filed Critical 주식회사 알티캐스트
Priority to KR1020160164760A priority Critical patent/KR102594608B1/ko
Priority to US15/828,432 priority patent/US10708648B2/en
Priority to EP17205672.3A priority patent/EP3334168A1/en
Publication of KR20180064647A publication Critical patent/KR20180064647A/ko
Application granted granted Critical
Publication of KR102594608B1 publication Critical patent/KR102594608B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2355—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
    • H04N21/2358—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages for generating different versions, e.g. for different recipient devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/251—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2665—Gathering content from different sources, e.g. Internet and satellite
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224—Monitoring of user activity on external systems, e.g. Internet browsing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4516—Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00—Solving problems of bandwidth in display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2352/00—Parallel handling of streams of display data
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/027—Arrangements and methods specific for the display of internet documents
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668—Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications

Abstract

가입자 단말 장치 및 서비스 환경에 따른 상태 정보와, 사용자 프로파일을 분석하여 다양한 컨텐츠 리소스 및 UI 리소스에 대응하는 적절한 인터랙션 모드를 판단하고, 인터랙션 모드에 따라 블렌딩한 조합형 UI 리소스에 의해 사용자 및 상황에 맞는 서비스를 제공하는 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다. 본 발명의 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 통하여 다양한 셋톱박스 및 미디어 디바이스 각각에 다양한 컨텐츠 리소스 및 UI 리소스에 대응하는 인터랙션 모드를 유기적으로 조합하여 안정성있는 지속가능한 유저 인터페이스를 제공할 수 있다.

Description

하이브리드 유저 인터페이스 제공 시스템 및 그 방법{SYSTEM AND METHOD FOR PROVIDING HYBRID USER INTERFACES}
본 발명은 원격 어플리케이션 서버로부터 수신된 인터랙션 모드(interaction mode)의 유기적 조합에 의한 조합형 UI 리소스 및 제어 커맨드에 따라 가입자 단말 장치가 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 렌더링하는 하이브리드 유저 인터페이스(UIs)를 제공하는 시스템 및 그 방법에 관한 것이다.
유료방송사업자의 기술개발 동향과 사업 동향을 포함하는 현재의 방송 환경은 인터넷 기반으로 전환되고 있거나, 일부 하이브리드 형태로 접목하는 양상으로 변화하고 있다.
또한, 다양한 스마트 접속 장치(smart CE device)의 등장으로 인하여 미디어에 대한 소비 형태도 다변화되고 있고, HTML5나 UHD 기술과 같은 새로운 발전된 기술이 등장함에 따라, 이에 대응하여 고성능 셋톱박스(STB)의 구매, UI(User Interface)/UX(User eXperience)의 개편, 신규 서비스의 개발 및 헤드엔드 시스템(Head-End system)의 업그레이드와 같은 자금 수요가 발생되며, 그러한 자금 수요는 유료방송사업자에게 부담을 제공하고 있는 실정이다.
유료방송사업자들은 기존 유료방송사업자들간이나, OTT(Over-The-Top) 사업자, 구글 TV, 애플 TV와 같은 새로운 미디어 사업자들과의 경쟁에서 우위를 점하기 위해 변화하는 시대적 트렌드에 부합하는 기술개발에 부단한 노력을 기울이고 있다.
이에, 유료방송사업자들은 기존에 보유하고 있는 셋톱박스를 성능이 우수한 모델로 교체하고, 인터넷 기반 서비스를 추가 도입하며, 다양한 시청자 요구를 분석하여 추천, 검색, 개인화 기능을 추가하고 있을 뿐 아니라, 다양한 디바이스에서 미디어 소비를 가능하게 하는 멀티스크린(Multi-Screen) 기술을 적용하고, HD를 넘어서 UHD 급의 영상을 제공하기 위한 촬영, 편집, 인코더, 네트웍 장비 등에 투자를 하고 있다.
하지만, 대규모 투자를 통해 이루어 놓은 기존의 헤드엔드 시스템과 셋톱박스를 일시에 교체하기에는 재무적 또는 시간적인 측면에서 힘든 상황에 당면해 있는 실정이다. 즉, 기존 방송 방식이 실시간 방송과 VoD, 기타 양방향 서비스들을 제공하는데 상당한 비용과 시간이 소요되고, 고객의 수요를 충족시킬 수 있는 서비스를 개발하는데 비용상의 부담이 크기 때문이다.
이러한 유료방송사업자들이 당면한 문제점을 해결하고, 기존 단방향 방송환경의 기술 방식을 탈피하며, 양방향 방송환경의 장점을 최대한 활용하여 다양한 셋톱박스 및 미디어 디바이스에 일관된 UI/UX를 제공 가능한 기술의 필용성이 대두되었다. 뿐만 아니라, 인터넷 기반 서비스(소셜, 추천, 검색, 개인화)를 제공할 수도 있고, 각 셋톱박스 모델마다 복잡했던 UI/UX의 변경 및 테스트가 용이한 기술의 필요성이 대두되었다.
이러한 필요성에 따라 클라우드 기반 서버에서 가입자 장치로 유저 인터페이스(UIs)를 제공하는 기술들이 나타났으나, 클라우드 기반 서버의 컴퓨팅 프로세스의 특성 상 서버의 프로세스 처리를 위한 대역폭 증가, 서버의 로드 증가와 같은 문제점이 발생하였다.
뿐만 아니라, 기존의 클라우드 기반 서버는 제어 커맨드 방식, 이미지 전송 방식 및 스트리밍 방식 중 하나의 모드(mode)를 이용하여 가입자 장치로 유저 인터페이스를 제공하였으므로, 다양한 컨텐츠 리소스 및 UI 리소스에 따른 적절한 서비스를 사용자에게 제공하지 못하는 문제점이 있었다.
미국공개특허 제2011/0296460호(2011.12.01), "METHOD AND APPARATUS FOR PROVIDING REMOTE USER INTERFACE(UI) SERVICE" 미국공개특허 제2013/0091525호(2013.04.11), "METHOD AND APPARATUS FOR PROVIDING CLOUD-BASED USER MENU"
본 발명은 원격 어플리케이션 서버의 제어 커맨드에 따라 가입자 단말 장치가 컨텐츠 리소스 및 UI 리소스를 원격 어플리케이션 서버와 구분된 스토리지로부터 수신하고, 컨텐츠 리소스 및 UI 리소스를 렌더링하여 신규 서비스의 도입이나 고객의 서비스 경험과 직결되는 애플리케이션 개발에서의 비용 절감을 제공하는 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다.
또한, 본 발명은 원격 어플리케이션 서버에서 가입자 단말 장치 및 서비스 환경에 따른 상태 정보와, 사용자 프로파일을 분석하여 다양한 컨텐츠 리소스 및 UI 리소스에 대응하는 적절한 인터랙션 모드를 유기적으로 조합하여 환경에 따른 유연한 대응으로 안정성있는 지속가능한 유저 인터페이스를 제공할 수 있는 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다.
또한, 본 발명은 원격 어플리케이션 서버에서 환경에 따른 적절한 인터랙션 모드를 판단하고, 그에 따른 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 블렌딩한 조합형 UI 리소스를 제공하여 실시간 트래픽 관리 및 재분배로 리소스를 절약할 수 있는 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다.
또한, 본 발명은 원격 어플리케이션 서버에서 가입자 단말 장치로부터 수집되는 상태 정보 및 사용자 프로파일에 기초하여 유저 인터페이스에 따른 실시간 모니터링 대응을 제공할 수 있는 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다.
또한, 본 발명은 원격 어플리케이션 서버에서 가입자 단말 장치의 사양에 기반하여 판단된 인터랙션 모드에 따라 블렌딩한 조합형 UI 리소스를 제공하여 가입자 단말 장치의 로드(load)를 현저히 감소시킨 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다.
또한, 본 발명은 종류와 사양이 다른 셋톱박스에 대한 애플리케이션 개발, 포팅, 테스트 없이도, 가입자 장치에 일관성 있는 유저 인터페이스(UIs)를 제공하여, 신속한 서비스 출시와 고객 만족도를 증대할 수 있는 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다.
또한, 본 발명은 낮은 성능의 가입자 단말 장치에서도 구현 가능한 유저 인터페이스(UIs)를 제공하여 가입자 단말 장치의 구매 비용과 서비스 개발 비용을 절감시키는 하이브리드 유저 인터페이스(UIs) 제공 시스템 및 그 방법을 제공한다.
본 발명의 실시예에 따른 원격 어플리케이션 서버는 가입자 단말 장치 및 서비스 환경 중 적어도 어느 하나에 대한 상태 정보를 수집하는 상태 정보 수집부, 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론하는 서비스 추론부, 상기 수집된 상태 정보 및 상기 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 상기 가입자 단말 장치으로의 제어 커맨드, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드(interaction mode)를 판단하는 인터랙션 모드 판단부 및 상기 판단된 인터랙션 모드에 기반하여 미디어 스토리지로 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 전송 요청을 위한 상기 제어 커맨드의 생성을 제어하고, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 상기 가입자 단말 장치로의 전송을 제어하는 제어부를 포함한다.
상기 서비스 추론부는 사용자의 시청 시간, 기능 사용량 및 컨텐츠 사용 이력 중 적어도 어느 하나를 포함하는 상기 사용자 프로파일을 분석하여 적합한 복수의 서비스를 조합하여 상기 커스트마이즈 서비스를 추론하고, 상기 인터랙션 모드 판단부는 상기 추론된 커스트마이즈 서비스에 기반하여 상기 조합형 UI 리소스의 제공을 판단할 수 있다.
상기 커스트마이즈 서비스는 상기 시청 시간, 상기 기능 사용량 및 상기 컨텐츠 사용 이력에 대한 레벨 별로 분류된 복수의 서비스의 조합으로 형성될 수 있다.
상기 가입자 단말 장치는 상기 원격 어플리케이션 서버로부터 상기 조합형 UI 리소스를 수신하여 렌더링하고, 상기 수신된 제어 커맨드에 대응하여 상기 미디어 스토리지로 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 요청을 수행하여 수신된 컨텐츠 리소스 및 UI 리소스를 렌더링할 수 있다.
상기 제어부는 상기 판단된 인터랙션 모드에 기반하여 스트리밍 기반의 조합형 UI 리소스를 상기 가입자 단말 장치로 스트리밍 전송되도록 제어할 수 있다.
상기 스트리밍 기반의 조합형 UI 리소스는 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 UI 리소스이고, 상기 제어부는 상기 스트리밍 기반의 조합형 UI 리소스를 인코딩하여, 상기 인코딩된 스트리밍 기반의 조합형 UI 리소스를 상기 가입자 단말 장치로 스트리밍 전송되도록 제어할 수 있다. 또한, 상기 가입자 단말 장치는 상기 스트리밍 전송된 조합형 UI 리소스를 디코딩하여 렌더링할 수 있다.
상기 제어부는 상기 판단된 인터랙션 모드에 기반하여 이미지 기반의 조합형 UI 리소스의 전송을 제어할 수 있다. 또한, 상기 가입자 단말 장치는 상기 이미지 기반의 조합형 UI 리소스를 수신하여 렌더링할 수 있다.
상기 제어부는 상기 수집된 상태 정보에 기초하여 스크린을 복수의 영역으로 구분하고, 상기 구분된 복수의 영역 각각에 대응하는 상기 판단된 인터랙션 모드에 기반하여 블렌딩한 상기 조합형 UI 리소스의 전송을 제어할 수 있다.
상기 인터랙션 모드 판단부는 상기 상태 정보 및 상기 추론된 커스트마이즈 서비스 중 적어도 어느 하나의 변동을 수집하여 상기 인터랙션 모드를 판단하고, 상기 제어부는 상기 구분된 복수의 영역 각각에서의 상기 판단 결과로부터 상기 인터랙션 모드를 스위칭하고, 상기 스위칭된 인터랙션 모드에 기반하여 블렌딩한 상기 조합형 UI 리소스의 전송을 제어할 수 있다. 또한, 상기 가입자 단말 장치는 상기 스위칭된 인터랙션 모드에 기반하여 상기 블렌딩한 조합형 UI 리소스를 수신하여 상기 복수의 영역에 대응하여 렌더링할 수 있다.
상기 상태 정보는 상기 가입자 단말 장치의 디코딩(decoding), 스크린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 중 적어도 어느 하나에 대한 처리 능력(capability) 정보를 포함할 수 있다.
또한, 상기 상태 정보는 상기 가입자 단말 장치와 연동하는 디스플레이 장치의 해상도 정보, 디스플레이 화면 회전 정보, 상기 가입자 단말 장치와 연동하는 입력 장치의 디바이스 정보, 및 서비스 가입 정보 중 적어도 어느 하나를 포함하고, 상기 가입자 단말 장치는 상기 상태 정보 수집부로부터 수신한 상태 정보 요청에 대응하여 상기 상태 정보를 생성하여 상기 상태 정보 수집부로 전송할 수 있다.
본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신한 상태 정보 요청에 대응하여 상태 정보를 생성하는 상태 정보 생성부, 상기 원격 어플리케이션 서버로부터 수신된 제어 커맨드를 기반으로 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 요청하고, 상기 요청에 대응하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 수신하는 리소스 수신부 및 상기 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나, 및 상기 원격 어플리케이션 서버로부터 수신된 인터랙션 모드(interaction mode)에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 렌더링하는 렌더링부를 포함한다.
또한, 본 발명의 실시예에 따른 가입자 단말 장치는 상기 원격 어플리케이션 서버로부터 수신된 상기 제어 커맨드에 기초하여 상기 미디어 스토리지로의 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 요청을 제어하는 단말 장치 제어부를 더 포함할 수 있다.
상기 단말 장치 제어부는 상기 블렌딩한 조합형 UI 리소스, 상기 미디어 스토리지로부터 수신된 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나를 복수의 영역으로 구분된 스크린에 대응하여 렌더링하도록 제어할 수 있다.
상기 상태 정보 생성부는 입력 장치를 통하여 수신되는 사용자 입력에 대응하는 상기 상태 정보를 생성할 수 있다.
본 발명의 실시예에 따른 하이브리드 유저 인터페이스 제공 방법은 가입자 단말 장치 및 서비스 환경 중 적어도 어느 하나에 대한 상태 정보를 수집하는 단계, 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론하는 단계, 상기 수집된 상태 정보 및 상기 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 상기 가입자 단말 장치으로의 제어 커맨드, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드(interaction mode)를 판단하는 단계 및 상기 판단된 인터랙션 모드에 기반하여 미디어 스토리지로 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 전송 요청을 위한 상기 제어 커맨드의 생성을 제어하고, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 상기 가입자 단말 장치로의 전송을 제어하는 단계를 포함한다.
본 발명의 다른 실시예에 따른 하이브리드 유저 인터페이스 제공 방법은 원격 어플리케이션 서버로부터 수신한 상태 정보 요청에 대응하여 상태 정보를 생성하는 단계, 상기 원격 어플리케이션 서버로부터 수신된 제어 커맨드를 기반으로 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 요청하고, 상기 요청에 대응하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 수신하는 단계 및 상기 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나, 및 상기 원격 어플리케이션 서버로부터 수신된 인터랙션 모드(interaction mode)에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 렌더링하는 단계를 포함한다.
본 발명에 따르면 원격 어플리케이션 서버의 제어 커맨드에 따라 가입자 단말 장치가 컨텐츠 리소스 및 UI 리소스를 원격 어플리케이션 서버와 구분된 스토리지로부터 수신하고, 컨텐츠 리소스 및 UI 리소스를 렌더링하여 신규 서비스의 도입이나 고객의 서비스 경험과 직결되는 애플리케이션 개발에서의 비용을 절감할 수 있다.
또한, 본 발명에 따르면 원격 어플리케이션 서버에서 가입자 단말 장치 및 서비스 환경에 따른 상태 정보와, 사용자 프로파일을 분석하여 다양한 컨텐츠 리소스 및 UI 리소스에 대응하는 적절한 인터랙션 모드를 유기적으로 조합하여 환경에 따른 유연한 대응으로 안정성있는 지속가능한 유저 인터페이스를 제공할 수 있다.
또한, 본 발명에 따르면 원격 어플리케이션 서버에서 환경에 따른 적절한 인터랙션 모드를 판단하고, 그에 따른 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 블렌딩한 조합형 UI 리소스를 제공하여 실시간 트래픽 관리 및 재분배로 리소스를 절약할 수 있다.
또한, 본 발명에 따르면 원격 어플리케이션 서버에서 가입자 단말 장치로부터 수집되는 상태 정보 및 사용자 프로파일에 기초하여 유저 인터페이스에 따른 실시간 모니터링 대응을 제공할 수 있다.
또한, 본 발명에 따르면 원격 어플리케이션 서버에서 가입자 단말 장치의 사양에 기반하여 판단된 인터랙션 모드에 따라 블렌딩한 조합형 UI 리소스를 제공하여 가입자 단말 장치의 로드(load)를 현저히 감소시킬 수 있다.
또한, 본 발명에 따르면 종류와 사양이 다른 셋톱박스에 대한 애플리케이션 개발, 포팅, 테스트 없이도, 가입자 장치에 일관성 있는 유저 인터페이스(UIs)를 제공하여, 신속한 서비스 출시와 고객 만족도를 증대할 수 있다.
또한, 본 발명에 따르면 낮은 성능의 가입자 단말 장치에서도 구현 가능한 유저 인터페이스(UIs)를 제공하여 가입자 단말 장치의 구매 비용과 서비스 개발 비용을 절감시킬 수 있다.
도 1은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스 시스템의 구성을 도시한 것이다.
도 2a 및 2b는 본 발명의 실시예에 따른 하이브리드 유저 인터페이스를 제공하는 시스템을 도시한 것이다.
도 3은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs) 제공 시스템의 원격 어플리케이션 서버 및 가입자 단말 장치의 구성을 설명하기 위해 도시한 것이다.
도 4a 내지 도 4c는 본 발명의 실시예에 따른 서비스 추론부의 예를 도시한 것이다.
도 5a 내지 도 5e는 본 발명의 실시예에 따른 스위칭되는 인터랙션 모드의 예를 도시한 것이다.
도 6은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs)를 제공하는 시스템에서의 원격 어플리케이션 서버를 통하여 유저 인터페이스를 제공하는 과정을 도시한 흐름도이다.
도 7은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs)를 제공하는 시스템에서의 가입자 단말 장치를 통하여 유저 인터페이스를 제공하는 과정을 도시한 흐름도이다.
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시예를 상세하게 설명하지만, 본 발명이 실시예에 의해 제한되거나 한정되는 것은 아니다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
본 명세서에서 사용되는 "실시예", "예", "측면", "예시" 등은 기술된 임의의 양상(aspect) 또는 설계가 다른 양상 또는 설계들보다 양호하다거나, 이점이 있는 것으로 해석되어야 하는 것은 아니다.
또한, '또는' 이라는 용어는 배타적 논리합 'exclusive or' 이기보다는 포함적인 논리합 'inclusive or' 를 의미한다. 즉, 달리 언급되지 않는 한 또는 문맥으로부터 명확하지 않는 한, 'x가 a 또는 b를 이용한다' 라는 표현은 포함적인 자연 순열들(natural inclusive permutations) 중 어느 하나를 의미한다.
또한, 본 명세서 및 청구항들에서 사용되는 단수 표현("a" 또는 "an")은, 달리 언급하지 않는 한 또는 단수 형태에 관한 것이라고 문맥으로부터 명확하지 않는 한, 일반적으로 "하나 이상"을 의미하는 것으로 해석되어야 한다.
또한, 본 명세서 및 청구항들에서 사용되는 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
한편, 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 상세한 설명을 생략할 것이다. 그리고, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스 시스템의 구성을 도시한 것이다.
도 1을 참조하면, 본 발명의 실시예에 따른 하이브리드 유저 인터페이스 시스템은 각 사용자 및 상황에 맞는 유저 인터페이스를 가입자 단말 장치(Multi Device, STB, TV 등)에 제공하기 위한 원격 어플리케이션 서버를 포함한다.
보다 상세하게는, 본 발명의 실시예에 따른 원격 어플리케이션 서버는 가입자 단말 장치로부터 수집되는 상태 정보 및 추론된 커스트마이즈 서비스 중 어느 하나에 기초하여 제어 커맨드(COMMAND), 이미지(IMAGE) 및 스트리밍(STREAMING) 중 적어도 어느 하나 이상의 유기적 조합을 위한 인터랙션 모드를 판단하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 제공한다.
예를 들면, 본 발명의 실시예에 따른 원격 어플리케이션 서버는 멀티 디바이스(Multi Device), 셋톱박스(STB) 및 TV 중 적어도 어느 하나로부터 처리 능력 및 사양에 관한 정보를 포함하는 상태 정보를 수집하고, 상태 정보를 수집하는 과정에서의 서비스 환경 정보를 수집한다. 또한, 본 발명의 실시예에 따른 원격 어플리케이션 서버는 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론한다.
이후, 본 발명의 실시예에 따른 원격 어플리케이션 서버는 수집된 상태 정보 및 사용자 프로파일 정보에 기초하여 제어 커맨드(COMMAND), 이미지 데이터(IMAGE) 및 스트리밍(SREAMING) 중 적어도 어느 하나 이상의 인터랙션 모드를 유기적으로 결합하고, 결합된 인터랙션 모드에 따른 컨텐츠 리소스 및 UI 리소스를 오퍼레이터 시스템(OPERATOR SYSTEM), VOD 서버(VOD SERVER), 리소스 서버(RESOURCE SERVER), 데이터 서버(DATA SERVER) 및 어플리케이션 서버(APP SERVER) 중 적어도 어느 하나의 외부 스토리지로부터 수신하여 블렌딩(blending)한 조합형 UI 리소스를 생성하여 가입자 단말 장치로 전송한다.
여기서, 상기 가입자 단말 장치는 PC, 스마트폰 및 태블릿 PC 중 적어도 어느 하나를 포함하는 멀티 디바이스(MULTI DEVICE)일 수 있으며, 레거시 셋톱박스(Legacy STB), 낮은 프로파일 셋톱박스(Low Profile STB), 높은 프로파일 셋톱박스(High Profile STB), 스마트 티비(Smart TV) 및 USB TV 중 적어도 어느 하나일 수 있다.
이에 따라서, 본 발명의 실시예에 따른 하이브리드 유저 인터페이스 시스템은 가입자 단말 장치 및 서비스 환경 중 적어도 어느 하나에 대한 상태 정보 및 추론된 커스트마이즈 서비스에 따라 제어 커맨드, 이미지 및 스트리밍 방식의 인터랙션 모드를 유기적으로 조합하여 사용자 및 상황에 맞는 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 제공함으로써, 각기 다른 사용자 커스트마이즈 서비스 및 상황을 모니터링하여 그에 따른 다양한 유저 인터페이스를 양질로 제공할 수 있다.
도 2a 및 2b는 본 발명의 실시예에 따른 하이브리드 유저 인터페이스를 제공하는 시스템을 도시한 것이다.
보다 상세하게는, 도 2a는 본 발명의 실시예에 따른 제어 커맨드 기반의 하이브리드 유저 인터페이스를 제공하는 시스템을 도시한 것이고, 도 2b는 본 발명의 실시예에 따른 이미지 전송 방식 및 스트리밍 전송 방식 중 어느 하나 기반의 하이브리드 유저 인터페이스를 제공하는 시스템을 도시한 것이다.
도 2a를 참조하면, 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs) 제공 시스템은 원격 어플리케이션 서버(100) 및 가입자 장치(200)를 포함한다.
본 발명의 실시예에 따른 원격 어플리케이션 서버(100)는 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 제어 커맨드의 제공을 위한 인터랙션 모드를 판단하고, 판단된 인터랙션 모드를 기반으로 제어 커맨드를 생성하여 가입자 장치(200)로 전송하며, 제어 커맨드를 기반으로 가입자 단말 장치(210)를 제어하거나, 가입자 단말 장치(210)에서의 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나에 대한 렌더링을 제어한다.
상세하게는 원격 어플리케이션 서버(100)는 가입자 장치(200) 내 가입자 단말 장치(210) 및 서비스 환경에 대한 상태 정보를 네트워크(300)를 통하여 수집하고, 가입자 단말 장치(210)로부터 수신되는 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론한다.
이에 따라서, 원격 어플리케이션 서버(100)는 상태 정보 및 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 제어 커맨드의 제공을 위한 인터랙션 모드를 판단하고, 판단된 인터랙션 모드에 기반하여 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나의 전송 요청을 위한 제어 커맨드를 생성하여 가입자 단말 장치(210)로 전송한다.
UI 리소스는 웹 페이지, 애플리케이션에 대한 비트맵 및 애플리케이션에 대한 그래픽 프리미티브(graphic primitive) 중 적어도 하나를 이용하여 구현될 수 있다.
컨텐츠 리소스는 비디오 컨텐츠, 오디오 컨텐츠, 실시간 TV 방송 프로그램, 주문형 프로그램 SNS 정보, 채팅 메시지, 상품 및 어플리케이션 중 적어도 어느 하나로 구현될 수 있다.
또한, 원격 어플리케이션 서버(100)는 가입자 단말 장치(210) 자체를 제어하기 위한 제어 커맨드를 생성할 수도 있다.
원격 어플리케이션 서버(100)는 생성된 제어 커맨드를 네트워크(300)를 통하여 가입자 장치(200)로 전송한다.
본 발명의 실시예에 따른 상태 정보는 가입자 단말 장치(210)가 원격 어플리케이션 서버(100)로부터의 제어 커맨드에 의해 특정 기능을 수행하기 위한 가입자 단말 장치(210)와 연관된 정보일 수 있다.
예를 들어, 상태 정보는 가입자 단말 장치(210)와 연동하는 디스플레이 장치(230)의 해상도 정보, 디스플레이 화면 회전 정보, 가입자 단말 장치(210)와 연동하는 입력 장치(220)와 같은 디바이스 정보, 및 서비스 가입 정보 중 적어도 어느 하나를 포함할 수 있다.
또 다른 예로, 상태 정보는 가입자 단말 장치(210)의 디코딩(decoding) 능력, 스트린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 능력 중 적어도 어느 하나에 대한 정보를 포함할 수 있다.
실시예에 따라서, 상기 상태 정보는 원격 어플리케이션 서버(100) 및 가입자 단말 장치(210) 간 세션 연결 시 세션 접속 정보와 함께 가입자 단말 장치(210)로부터 생성되어 원격 어플리케이션 서버(100)로 전송될 수 있고, 사용자 입력에 대응하여 가입자 단말 장치(210)로부터 생성되어 원격 어플리케이션 서버(100)로 전송될 수도 있다.
본 발명의 원격 어플리케이션 서버(100)는 헤드엔드 시스템(head and system) 또는 클라우드 기반의 미디어 제공 서버일 수 있고, 어플리케이션 스토리지(510)로부터 서비스 제공을 위한 어플리케이션을 수신하며, 데이터 스토리지(520)로부터 가입자 정보, 미디어 정보, 소셜 네트워크 연관 정보와 같은 데이터를 수신할 수 있다.
가입자 장치(200) 내의 가입자 단말 장치(210)는 수신된 제어 커맨드에 따라 가입자 단말 장치(210) 자체의 기능을 수행하거나, 원격 어플리케이션 서버(100)와 구분되어 존재하는 컨텐츠 스토리지(410) 및 UI 리소스 스토리지(420)로부터 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 네트워크(300)를 통하여 수신하여 렌더링을 수행한다.
예를 들면, 가입자 단말 장치(210)는 원격 어플리케이션 서버(100)로부터 인터랙션 모드에 기반하여 생성된 제어 커맨드를 수신하고, 수신된 제어 커맨드를 기반으로 미디어 스토리지(400)로 컨텐츠 리소스 및 UI 리소스와 같은 미디어의 전송을 요청한다. 미디어 스토리지(400)는 저장되는 미디어의 종류 또는 형태에 따라 컨텐츠 스토리지(410) 및 UI 리소스 스토리지(420)를 포함할 수 있다.
상세하게는 가입자 단말 장치(210)는 수신된 제어 커맨드를 기반으로 컨텐츠 스토리지(410)로 컨텐츠의 전송을 요청하고, UI 리소스 스토리지(420)로 UI 리소스의 전송을 요청하여 컨텐츠 스토리지(410)로부터 컨텐츠 리소스를 수신하며, UI 리소스 스토리지(420)로부터 UI 리소스를 수신한다.
이후, 가입자 단말 장치(210)는 원격 어플리케이션 서버(100)로부터 수신한 제어 커맨드를 기반으로 수신된 컨텐츠 리소스 및 수신된 UI 리소스 중 적어도 어느 하나를 렌더링한다.
실시예에 따라서는 가입자 장치(200)는 제어 커맨드에 기반하여 컨텐츠 스토리지(410)와 형성된 컨텐츠 채널을 통하여 컨텐츠 리소스를 요청하거나 수신할 수 있고, UI 리소스 스토리지(420)와 형성된 UI 리소스 채널을 통하여 UI 리소스를 요청하거나 수신할 수 있다.
UI 리소스는 웹 페이지, 애플리케이션에 대한 비트맵 및 애플리케이션에 대한 그래픽 프리미티브(graphic primitive) 중 적어도 하나를 이용하여 구현될 수 있다.
실시예에 따라 UI 리소스는 사업자 서비스 및 가입자 장치(200)를 제어하기 위한 사용자 명령을 외부로부터 입력받는 사용자 인터페이스를 포함할 수 있다.
가입자 장치(200)는 가입자 단말 장치(210), 입력 장치(220) 및 디스플레이 장치(230)를 포함할 수 있고, 도 2a에 도시된 바와 같이 가입자 장치(200)는 적어도 하나 이상일 수 있다.
본 발명의 가입자 단말 장치(210)는 셋톱 터미널(STTs, set-top terminals), 셋톱박스(STBs, set-top boxes), 통신 터미널(communication terminal), PC, 이동통신단말기, 스마트폰, 노트패드, PDA, 태블릿 PC 와 같이 유무선 통신 모듈이 탑재된 전자 장치일 수 있으나, 이에 한정되지 아니하고, 네트워크(300)를 통하여 원격 어플리케이션 서버(100), 컨텐츠 스토리지(410) 및 UI 리소스 스토리지(420) 중 적어도 어느 하나와 접속하여 통신할 수 있는 단말 장치일 수 있다.
실시예에 따라서는 가입자 단말 장치(210)는 신호 처리, 대역폭 제어 프로세스 및 그래픽 처리 프로세스를 처리할 수 있는 단말 장치일 수도 있다.
상세하게는 가입자 단말 장치(210)는 비디오 컨텐츠 및 오디오 컨텐츠를 포함하는 컨텐츠에 대한 MPEG-2 전송 스트림(MPEG-2 transport stream)을 수신하여 이를 디코딩하고, 디코딩된 컨텐츠를 렌더링하는 것과 같은 그래픽 처리 프로세스를 수행하는 단말 장치일 수 있다.
또한, 가입자 단말 장치(210)는 가입자 단말 장치(210) 내 저장되어 유지되는 로컬 UI 리소스 및 수신된 미디어(UI 리소스 및 컨텐츠 리소스)를 렌더링하여, 사용자에게 EPG(electronic program guide), VOD, 및 DVR(digital video recorder)과 같은 기능을 제공할 수 있다.
입력 장치(220)는 리모콘, 키보드, 터치 스크린 디바이스와 같은 사용자로부터 입력을 수신할 수 있는 장치일 수 있다.
가입자 단말 장치(210)는 입력 장치(220)로부터 디스플레이 장치(230)를 통하여 렌더링되어 제공되는 컨텐츠 리소스 및 UI 리소스에 대한 양방향성을 기초로 하는 인터랙션(interaction) 기반의 사용자 입력을 수신할 수 있다.
예를 들어, 사용자 입력은 스트림 요청(stream request), 세션 초기화, 클릭 스트림(click stream)와 같은 다양한 신호를 포함할 수 있다.
실시예에 따라서는 가입자 단말 장치(210)는 입력 장치(220)를 통하여 수신되는 사용자 입력의 종류에 따라 원격 어플리케이션 서버(100)로부터 제어 커맨드에 의존하지 않고, 직접적으로 사용자 입력에 대응하여 리소스에 대한 렌더링을 수행할 수도 있다.
예를 들어, 사용자 입력이 현재 사용자에게 제공되는 리소스 상태에 맞춰서 재가공되는 경우, 리소스에 대한 재가공 과정에서 원격 어플리케이션 서버(100)로 상태 정보의 전송이 필요하지 않을 수 있다. 즉, 가입자 단말 장치(210)에서 입력 장치(220)를 통하여 수신되는 사용자 입력에 대응하여 리소스의 직접적인 처리를 수행할 수도 있다.
디스플레이 장치(230)는 텔레비전, 컴퓨터 모니터, 통신 모니터, 스마트폰 디스플레이와 같이 컨텐츠 리소스 및 UI 리소스를 사용자에게 시각 및 청각을 통하여 제공하는 장치일 수 있다.
컨텐츠 스토리지(410)는 비디오 컨텐츠, 오디오 컨텐츠, 실시간 TV 방송 프로그램, 주문형 프로그램, SNS 정보, 채팅 메시지, 상품 및 어플리케이션과 같은 컨텐츠를 저장하여 유지할 수 있다.
실시예에 따라, 컨텐츠 스토리지(410)는 MPEG-2 전송 패킷, MPEG-4, DVB와 같은 특정 프로토콜에 대응하는 포맷의 컨텐츠 리소스 또는 특정 프로토콜이 적용되지 않은 컨텐츠 리소스를 저장할 수도 있다.
다른 예시로서, 컨텐츠 스토리지(410)는 선정된 방식으로 분할된 컨텐츠를 저장할 수도 있다.
컨텐츠가 실시간 방송 컨텐츠인 경우, 원격 어플리케이션 서버(100)는 컨텐츠 스토리지(410)가 방송 컨텐츠를 획득하고, 획득된 방송 컨텐츠를 선정된 방식으로 분할하여 분할된 방송 컨텐츠로 저장하도록 제어할 수도 있다. 이 경우, 컨텐츠 스토리지(410)는 방송 컨텐츠를 획득하여 저장하기 위해 방송 편성 정보를 별도로 저장 및 관리할 수도 있다.
예를 들어, 원격 어플리케이션 서버(100)는 가입자 단말 장치(210)의 상태 정보를 분석하여, 분석된 상태 정보가 분할 저장된 방송 컨텐츠의 수신 대기 상태인 경우, 원격 어플리케이션 서버(100)는 분할 저장된 방송 컨텐츠의 전송을 위한 제어 커맨드를 생성하여 가입자 단말 장치(210)로 전송한다.
제어 커맨드를 수신한 가입자 단말 장치(210)는 제어 커맨드를 기반으로 컨텐츠 스토리지(410)로 방송 컨텐츠의 전송 요청을 전송하고, 컨텐츠 스토리지(410)는 분할 컨텐츠에 대한 부가 데이터를 검색한 후 해당 요청에 적합한 적어도 하나의 분할 컨텐츠를 추출하고, 이를 합성하여 사용자 컨텐츠로서 가공하여 가입자 단말 장치(210)로 전송할 수 있다.
이때, 컨텐츠 스토리지(410)는 해당 컨텐츠를 다운로드 또는 스트리밍 방식으로 가입자 단말 장치(210) 또는 다른 클라이언트 디바이스(미도시)로 전송할 수 있다.
또한, 컨텐츠 스토리지(410)는 클라우드 저장 공간에 방송 컨텐츠, 분할 컨텐츠 및 사용자 컨텐츠 중 적어도 하나를 저장할 수 있고, 사용자가 소지한 복수의 클라이언트 디바이스 간에 컨텐츠에 대한 연속 재생('N-스크린 서비스')이 가능하도록 끊임 없이 컨텐츠를 제공할 수도 있다.
이를 위해, 원격 어플리케이션 서버(100) 또는 컨텐츠 스토리지(410) 중 어느 하나는 클라이언트 디바이스 별 컨텐츠 재생 이력을 별도로 저장 및 관리할 수도 있다.
다른 실시예에 따라서는 원격 어플리케이션 서버(100)는 컨텐츠 스토리지(410) 및 UI 리소스 스토리지(420)로부터 다양한 통신 프로토콜에 따라 대응하는 컨텐츠 리소스 및 UI 리소스를 적어도 하나 이상의 가입자 장치(200)로 각각 상이하게 전송하도록 제어할 수도 있다.
즉, 제1 가입자 장치 및 제2 가입자 장치는 서로 상이한 프로토콜 방식의 컨텐츠 리소스 및 UI 리소스를 수신할 수 있다.
도 2b를 참조하면, 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs) 제공 시스템은 원격 어플리케이션 서버(100) 및 가입자 장치(200)를 포함한다.
본 발명의 실시예에 따른 원격 어플리케이션 서버(100)는 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드를 판단하고, 판단된 인터랙션 모드를 기반으로 가입자 단말 장치(210)에서의 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스에 대한 렌더링을 제어한다.
상세하게는 원격 어플리케이션 서버(100)는 가입자 장치(200) 내 가입자 단말 장치(210) 및 서비스 환경에 대한 상태 정보를 네트워크(300)를 통하여 수집하고, 가입자 단말 장치(210)로부터 수신되는 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론한다.
이에 따라서, 원격 어플리케이션 서버(100)는 상태 정보 및 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드를 판단하고, 판단된 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 이미지 전송 방식 또는 스트리밍 전송 방식으로 블렌딩한 조합형 UI 리소스를 생성하여 가입자 단말 장치(210)로 전송한다.
예를 들면, 원격 어플리케이션 서버(100)는 조합형 UI 리소스를 생성하기 위해, 판단된 인터랙션 모드에 기반하여 컨텐츠 스토리지(410)로부터 수신되는 컨텐츠 리소스 및 UI 리소스 스토리지(420)로부터 수신되는 UI 리소스를 수신하여 이미지 전송 방식 및 스트리밍 전송 방식에 따라 블렌딩한 조합형 UI 리소스를 생성할 수 있다.
이미지 전송 방식에 따른 조합형 UI 리소스는 컨텐츠 스토리지(410) 및 UI 리소스 스토리지(420)로부터 수신된 컨텐츠 리소스 및 UI 리소스로부터 이미지 기반으로 블렌딩될 수 있다.
또한, 스트리밍 전송 방식에 따른 조합형 UI 리소스는 컨텐츠 스토리지(410) 및 UI 리소스 스토리지(420)로부터 수신된 컨텐츠 리소스 및 UI 리소스로부터 비디오 프레임(video frame)을 스티치(stitch)하여 인코딩하고, 인코딩된 비디오 프레임의 시퀀스(sequence)를 포함하여 스트리밍 기반으로 블렌딩될 수 있다.
여기서, UI 리소스는 웹 페이지, 애플리케이션에 대한 비트맵 및 애플리케이션에 대한 그래픽 프리미티브(graphic primitive) 중 적어도 하나를 이용하여 구현될 수 있다.
또한, 컨텐츠 리소스는 비디오 컨텐츠, 오디오 컨텐츠, 실시간 TV 방송 프로그램, 주문형 프로그램 SNS 정보, 채팅 메시지, 상품 및 어플리케이션 중 적어도 어느 하나로 구현될 수 있다.
원격 어플리케이션 서버(100)는 생성된 조합형 UI 리소스를 네트워크(300)를 통하여 가입자 장치(200)로 전송한다.
가입자 장치(200) 내의 가입자 단말 장치(210)는 원격 어플리케이션 서버(100)에서 판단된 인터랙션 모드에 따라 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 네트워크(300)를 통하여 수신하여 렌더링을 수행한다.
예를 들면, 가입자 단말 장치(210)는 원격 어플리케이션 서버(100)로부터 상태 정보 및 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 이미지 전송 방식 및 스트리밍 전송 방식 중 어느 하나의 인터랙션 모드에 기반하여 블렌딩한 조합형 UI 리소스를 수신하고, 수신된 조합형 UI 리소스에 기초하여 복수의 영역으로 구분된 스크린 영역 각각에 따른 조합형 UI 리소스를 렌더링할 수 있다.
도 3은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs) 제공 시스템의 원격 어플리케이션 서버 및 가입자 단말 장치의 구성을 설명하기 위해 도시한 것이다.
본 발명의 실시예에 따른 원격 어플리케이션 서버(100)는 가입자 단말 장치(210) 및 서비스 환경에 따른 상태 정보를 수집하고, 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론하며, 상태 정보 및 커스트마이즈 서비스를 기반으로 판단된 인터랙션 모드에 따라 제어 커맨드를 생성하여 가입자 단말 장치(210)로 전송하거나, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 가입자 단말 장치(210)로의 전송을 제어한다.
이를 위해 원격 어플리케이션 서버(100)는 상태 정보 수집부(110), 서비스 추론부(140), 인터랙션 모드 판단부(120) 및 제어부(130)를 포함한다.
상태 정보 수집부(110)는 가입자 단말 장치(210) 및 서비스 환경 중 적어도 어느 하나에 대한 상태 정보를 수집한다.
상태 정보 수집부(110)는 가입자 단말 장치(210)의 상태 정보의 수집을 위해 네트워크(300)를 통하여 가입자 단말 장치(210)로 상태 정보 요청 신호를 전송하고, 전송된 상태 정보 요청 신호에 대응하여 가입자 단말 장치(210)로부터 상태 정보를 수신한다.
이에 따른 상태 정보 수집부(110)는 가입자 단말 장치(210)로부터 수신되는 상태 정보로부터 네트워크(300)의 서비스 환경에 대한 상태 정보를 수집할 수 있다.
예를 들면, 상태 정보 수집부(110)는 가입자 단말 장치(210)로부터 수신되는 상태 정보를 기반으로 데이터의 수신 과정에서의 네트워크 지연(network latency) 및 혼잡 상태 등의 서비스 환경에 대한 상태 정보를 수집할 수 있다.
상태 정보는 가입자 단말 장치(210)가 원격 어플리케이션 서버(100)로부터의 제어 커맨드에 의해 특정 기능을 수행하기 위한 가입자 단말 장치(210)와 연관된 정보일 수 있다.
예를 들어, 상태 정보는 가입자 단말 장치(210)와 연동하는 도 2에 도시된 디스플레이 장치(230)의 해상도 정보, 디스플레이 화면 회전 정보, 가입자 단말 장치(210)와 연동하는 도 2에 도시된 입력 장치(220)와 같은 디바이스 정보, 및 서비스 가입 정보 중 적어도 어느 하나를 포함할 수 있다.
상기 상태 정보는 원격 어플리케이션 서버(100) 및 가입자 단말 장치(210) 간 세션 연결 시 세션 접속 정보와 함께 가입자 단말 장치(210)로부터 생성되어 원격 어플리케이션 서버(100)로 전송될 수 있고, 사용자 이력에 대응하여 가입자 단말 장치(210)로부터 생성되어 원격 어플리케이션 서버(100)로 전송될 수도 있다.
또한, 상태 정보는 가입자 단말 장치(210)의 디코딩(decoding), 스크린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 중 적어도 어느 하나에 대한 처리 능력(capability)에 대한 사양 정보를 포함할 수 있다.
또한, 상태 정보는 입력 장치를 통하여 수신되는 사용자 입력에 대응하는 정보일 수도 있다.
서비스 추론부(140)는 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론한다.
서비스 추론부(140)는 사용자의 시청 시간, 기능 사용량 및 컨텐츠 사용 이력 중 적어도 어느 하나를 포함하는 사용자 프로파일을 분석하여 적합한 복수의 서비스를 조합하여 커스트마이즈 서비스를 추론할 수 있다.
커스트마이즈 서비스는 시청 시간, 기능 사용량 및 컨텐츠 사용 이력에 대한 레벨별로 분류된 복수의 서비스의 조합으로 형성될 수 있다.
이하에는 도 4a 내지 도 4c를 참조하여 본 발명의 실시예에 따른 서비스 추론부(140)를 통해 커스트 마이즈 서비스를 추론하는 예에 대해 상세히 설명하고자 한다.
도 4a 내지 도 4c는 본 발명의 실시예에 따른 서비스 추론부의 예를 도시한 것이다.
보다 상세하게는, 도 4a는 시청 시간, 기능 사용량 및 컨텐츠 사용 이력(컨텐츠 구매)의 기준으로 분류된 테이블을 도시한 것이고, 도 4b는 사용자 프로파일을 분석하여 테이블 내의 적합한 서비스를 선택하는 예를 도시한 것이며, 도 4c는 선택된 복수의 서비스를 조합하여 커스트마이즈 서비스를 추론하는 예를 도시한 것이다.
도 4a를 참조하면 테이블은 TV 시청 시간, TV 기능 사용량 및 컨텐츠 사용 이력 각각에 따른 기설정된 레벨에 기초하여 헤비 사용자(Heavy User) 내지 라이트 사용자(Light User)를 분류한다.
예를 들면, TV 시청 시간에서의 헤비 사용자는 TV 시청시간이 높은 사용자, 시청 컨텐츠가 한정적인 사용자, 유료채널을 가입한 사용자 및 시청시간이 높은 사용자 중 어느 하나일 수 있고, 라이트 사용자는 특정 시간대 및 특정 프로그램만 시청하는 사용자, TV 시청을 거의 하지 않는 사용자 및 TV를 켜 둔 상태에서의 귀로만 청취하는 사용자 중 어느 하나일 수 있다.
TV 기능 사용량에서의 헤비 사용자는 일반채널/유료채널을 가입한 사용자, 채널/VOD를 구매한 사용자, 채널/홈 메뉴 탐색/컨텐츠를 소비하는 사용자 및 채널/VOD 구매/홈 메뉴 부가기능 사용/Companin 연결을 사용하는 사용자 중 어느 하나일 수 있고, 라이트 사용자는 채널 탐색만으로 TV를 시청하는 사용자, 미니 가이드 탐색으로 채널을 시청하는 사용자 및 DCA탐색으로 채널을 사용하는 사용자(시청하는 채널 인지 상태) 중 어느 하나일 수 있다.
컨텐츠 사용 이력에서의 헤비 사용자는 TV 다시보기 구매 사용자, 월정액 상품가입 구매 사용자, 영화/키즈/교육 등 특정장르 구매 사용자 및 다양한 컨텐츠 구매 사용자 중 어느 하나일 수 있고, 라이트 사용자는 VOD구매가 전혀 없는 사용자, 무료 컨텐츠만 구매하는 사용자 및 포인트 결제 가능 시 구매하는 사용자 중 어느 하나일 수 있다.
다만, 도 4a에 도시된 테이블에서 TV 시청 시간, TV 기능 사용량 및 컨텐츠 사용 이력의 기준 및 그에 따른 기설정된 분류 기준의 예는 이에 한정되는 것이 아니며, 적용되는 실시예에 따라 다양하게 변경 가능하다.
도 4b를 참조하면, 본 발명의 실시예에 따른 서비스 추론부(140)는 사용자 프로파일을 분석하여 기설정된 테이블에서의 적합한 서비스를 선택할 수 있다.
예를 들면, 본 발명의 실시예에 따른 서비스 추론부(140)는 도 4b에서, 사용자 프로파일을 분석하여 TV 시청 시간에서 헤비 사용자이고, TV 기능 사용량에서 라이트 사용자이며, 컨텐츠 사용 이력에서 라이트 사용자인 것을 판단할 수 있다.
이후, 도 4c를 참조하면 본 발명의 실시예에 따른 서비스 추론부(140)는 TV 시청 시간, TV 기능 사용량 및 컨텐츠 사용 이력 각각에서의 선택된 복수의 서비스 (사용성1, 사용성2, 사용성3, 사용성5, 사용성7 등등)를 조합하여 적합한 커스트마이즈 서비스(Service1, Service2, Service3 등)를 추론한다.
이에 따라서, 본 발명의 실시예에 따른 서비스 추론부(140)는 가입자 단말 장치(210)로부터 수신되는 사용자 프로파일을 분석하여 복수의 사용자 각각에 따른 서로 다른 맞춤별 커스트마이즈 서비스를 추론할 수 있다.
실시예에 따라서, 본 발명의 실시예에 따른 서비스 추론부(140)는 제1 가입자 단말 장치(210)의 높은 TV 시청 시간, 미니 가이드 탐색으로 채널을 시청하는 TV 기능 사용량 및 무료 컨텐츠를 사용한 컨텐츠 사용 이력 각각에 따라 사용성1 및 사용성3을 추론할 수 있고, 추론된 사용성1 및 사용성3을 조합하여 상기 제1 가입자 단말 장치(210)에게 적합한 제1 서비스(Service1)를 추론할 수 있다.
다른 실시예에 따라서, 본 발명의 실시예에 따른 서비스 추론부(140)는 제2 가입자 단말 장치(210)의 특정 시간대 및 특정 프로그램만을 시청하는 정해진 TV 시청 시간, 일반채널만을 이용하는 TV 기능 사용량 및 포인트 결제한 컨텐츠 사용 이력 각각에 따라 사용성2 및 사용성 7을 추론할 수 있고, 추론된 사용성2 및 사용성7을 조합하여 상기 제2 가입자 단말 장치(210)에게 적합한 제2 서비스(Service2)를 추론할 수 있다.
다른 실시예에 따라서, 본 발명의 실시예에 따른 서비스 추론부(140)는 제3 가입자 단말 장치(210)의 TV 시청을 거의 하지 않은 TV 시청 시간, DCA탐색으로 채널을 시청하는 TV 기능 사용량 및 무료 컨텐츠를 사용한 컨텐츠 사용 이력 각각에 따라 사용성3 및 사용성5를 추론할 수 있고, 추론된 사용성3 및 사용성5를 조합하여 상기 제3 가입자 단말 장치(210)에게 적합한 제3 서비스(Service3)를 추론할 수 있다.
예를 들면, 본 발명의 실시예에 따른 서비스 추론부(140)는 가입자 단말 장치(210)를 사용하는 복수의 사용자가 존재하는 경우, 복수의 사용자 각각의 사용자 프로파일을 분석할 수 있고, 각기 분석된 사용자 프로파일에 대응하는 복수의 사용성을 추론 및 조합하여 가입자 단말 장치(210)에 적합한 서비스를 추론할 수 있다.
이에 따라서, 가입자 단말 장치(210)는 복수의 사용자 각각에게 적합한 서비스를 제공할 수 있으며, 실시예에 따라서는 동일한 가입자 단말 장치를 사용하는 복수의 사용자 각각에게 적합 서비스를 융합한 융합 서비스를 제공할 수도 있다.
다만, 사용자의 TV 시청 시간, TV 기능 사용량 및 컨텐츠 사용 이력의 실시예와, 복수의 서비스는 전술한 예 및 개수에 한정되는 것은 아니다.
또한, 실시예에 따라서는 상기 복수의 서비스는 복수의 사용자의 커스트마이즈 서비스일 수도 있다.
다시 도 3을 참조하면, 본 발명의 실시예에 따른 원격 어플리케이션 서버(100)의 인터랙션 모드 판단부(120)는 수집된 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 가입자 단말 장치(210)으로의 제어 커맨드, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드(interaction mode)를 판단한다.
인터랙션 모드 판단부(120)는 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 제어 커맨드(COMMAND), 이미지 전송 방식(IMAGE) 및 스트리밍 전송 방식(STREAMING) 중 어느 하나의 인터랙션 모드를 판단할 수 있다.
예를 들면, 인터랙션 모드는 제어 커맨드 방식일 수 있다. 상기 인터랙션 모드는 가입자 단말 장치(210)에서의 렌더링 제어를 위한 제어 커맨드 방식일 수 있다.
실시예에 따라서, 인터랙션 모드 판단부(120)는 가입자 단말 장치(210)에서의 디코딩(decoding), 스크린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 중 적어도 어느 하나에 대한 처리 능력(capability)이 이미지 전송 방식 및 스트리밍 방식을 수용할 수 없거나, 네트워크(300) 내의 데이터 딜레이(delay) 현상에 따른 서비스 환경이 발생하는 경우, 인터랙션 모드는 제어 커맨드 방식을 이용하여 가입자 단말 장치(210)에서의 유저 인터페이스 사용에 대한 최소 사용성을 보장할 수 있다.
또 다른 예로, 인터랙션 모드는 이미지 전송 방식일 수 있다. 상기 인터랙션 모드는 가입자 단말 장치(210)에서의 이미지 렌더링을 위한 이미지 전송 방식일 수 있다.
실시예에 따라서, 인터랙션 모드 판단부(120)는 가입자 단말 장치(210)에서의 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나의 모자이크 뷰(Mosaic view) 및 애니메이션 스트리밍이 불가능하거나, 그에 따른 네트워크비용이 발생하는 경우 인터랙션 모드를 이미지 전송 방식으로 이용할 수 있다.
또 다른 예로, 인터랙션 모드는 스트리밍 전송 방식일 수 있다. 상기 인터랙션 모드는 가입자 단말 장치(210)에서의 리소스의 스트리밍을 위한 스트리밍 전송 방식일 수 있다.
실시예에 따라서, 인터랙션 모드 판단부(120)는 가입자 단말 장치(210)에서의 디코딩(decoding), 스크린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 중 적어도 어느 하나에 대한 처리 능력(capability)이 제어 커맨드, 이미지 전송 방식 및 스트리밍 전송 방식을 모두 수용할 수 있는 경우, 인터랙션 모드를 처리 속도가 빠른 스트리밍 전송 방식으로 이용할 수 있다.
인터랙션 모드 판단부(120)는 실시간으로 변동되는 상태 정보 및 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 가입자 단말 장치(210)으로의 제어 커맨드, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드를 판단하며, 기설정된 기준 범위를 기반으로 가입자 단말 장치(210)의 로드를 감소시키고, 속도를 높이며, 보다 정확한 리소스를 제공할 수 있도록 가입자 단말 장치(210)의 사양에 적합한 모드를 판단한다.
예를 들면, 상태 정보 및 커스트마이즈 서비스 중 적어도 어느 하나에 기초하여 인터랙션 모드는 제어 커맨드 방식 및 이미지 전송 방식일 수 있고, 제어 커맨드 방식 및 스트리밍 전송 방식일 수 있으며, 이미지 전송 방식 및 스트리밍 전송 방식일 수 있다.
실시예에 따라서, 인터랙션 모드는 제어 커맨드 방식, 이미지 전송 방식 및 스트리밍 전송 방식일 수도 있다.
즉, 인터랙션 모드는 제어 커맨드 방식, 이미지 전송 방식 및 스트리밍 전송 방식 각각의 단일 방식일 수 있으며, 실시예에 따라서는 두 개의 방식 및 세 개의 방식을 모두 포함할 수도 있다.
또한, 실시간 변동되는 상태 정보 및 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 판단되는 인터랙션 모드에 따라, 제어부(130)는 판단 결과로부터 인터랙션 모드를 스위칭하고, 스위칭된 인터랙션 모드에 기반하여 블렌딩되는 조합형 UI 리소스의 전송을 제어할 수 있다.
제어부(130)는 판단된 인터랙션 모드에 기반하여 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나의 전송 요청을 위한 제어 커맨드의 생성을 제어하고, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 가입자 단말 장치(210)로의 전송을 제어한다.
예를 들면, 조합형 UI 리소스는 복수의 컨텐츠 리소스를 블렌딩한 것일 수 있고, 복수의 UI 리소스를 블렌딩한 것일 수 있다. 또 다른 예로, 조합형 UI 리소스는 컨텐츠 리소스 및 UI 리소스를 블렌딩한 것일 수 있으나, 컨텐츠 리소스 및 UI 리소스의 개수, 종류 및 조합 형태는 실시예에 따라 다양하게 적용될 수 있으므로 이에 한정되는 것은 아니다.
제어부(130)는 판단된 인터랙션 모드에 기반하여 스트리밍 기반의 조합형 UI 리소스를 가입자 단말 장치(210)로 스트리밍 전송되도록 제어할 수 있다.
예를 들면, 상기 스트리밍 기반의 조합형 UI 리소스는 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 UI 리소스이며, 제어부(130)는 스트리밍 기반의 조합형 UI 리소스를 인코딩하여 가입자 단말 장치(210)로 스트리밍 되도록 제어할 수 있다.
실시예에 따라서, 제어부(130)는 판단된 스트리밍 전송 방식의 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상으로부터 비디오 프레임(video frame)을 스티치(stitch)하여 인코딩하고, 인코딩된 비디오 프레임의 시퀀스(sequence)를 포함하는 조합형 UI 리소스를 가입자 단말 장치(210)로 스트리밍 되도록 전송할 수 있다. 이에 따라서, 제어부(130)는 스트리밍 전송 방식 기반의 인터랙션 모드를 이용하여 고용량의 조합형 UI 리소스를 빠르고 끊김없이 전송할 수 있다.
제어부(130)는 판단된 인터랙션 모드에 기반하여 이미지 기반의 조합형 UI 리소스를 가입자 단말 장치(210)로 이미지 전송되도록 제어할 수 있다.
예를 들면, 제어부(130)는 판단된 이미지 전송 방식의 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상으로부터 이미지 기반의 블렌딩한 조합형 UI 리소스를 가입자 단말 장치(210)로 이미지 전송할 수 있다.
실시예에 따라서, 제어부(130)는 EPG(Electronic Program Guide) 및 애플리케이션 서비스 등을 이미지 기반으로 블렌딩하여 가입자 단말 장치(210)로 전송하도록 제어할 수 있다.
제어부(130)는 수집된 상태 정보에 기초하여 스크린을 복수의 영역으로 구분하고, 구분된 복수의 영역 각각에 대응하는 전술한 바와 같이 판단된 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 가입자 단말 장치(210)로 전송되도록 제어할 수 있다.
제어부(130)는 수집된 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나에 대한 가입자 단말 장치(210)에서의 렌더링 제어를 위한 제어 커맨드를 생성한다.
또한, 제어부(130)는 가입자 단말 장치(210)를 제어하기 위한 단말 제어 커맨드 중 적어도 어느 하나를 포함하는 제어 커맨드를 생성할 수 있으며, 생성된 제어 커맨드를 가입자 단말 장치(210)로 전송한다.
또한, 실시예에 따라서는 제어부(130)는 가입자 단말 장치(210)에서 렌더링 시 요구되는 이미지를 포함하는 제어 커맨드를 생성할 수도 있다.
또한, 본 발명의 실시예에 따른 원격 어플리케이션 서버(100)는 상태 정보 요청, 상태 정보 수신, 제어 커맨드의 전송, 조합형 UI 리소스의 전송과 연관된 가입자 단말 장치(210)와의 시그널 패스(signal path)를 형성하는 트랜스포트 모듈(150)을 더 포함할 수 있다. 바람직하게는 상기 시그널 패스는 가입자 단말 장치(210)의 트랜스포트 모듈(216)과 단일 패스를 형성할 수 있다.
원격 어플리케이션 서버(100)는 트랜스포트 모듈(150)의 시그널 패스를 통하여 가입자 단말 장치(210)에 대한 효율적인 제어가 가능하다.
예를 들어, 원격 어플리케이션 서버(100)는 트랜스포트 모듈(150)을 통하여 가입자 단말 장치(210)에 설치되는 로컬 어플리케이션, 가입자 단말 장치(210)와의 인증을 효율적으로 제어할 수 있다.
본 발명의 실시예에 따른 가입자 단말 장치(210)는 제어부(130)로부터 수신된 제어 커맨드에 따라 가입자 단말 장치(210) 자체의 기능을 수행하거나, 원격 어플리케이션 서버(100)와 구분되어 존재하는 미디어 스토리지로부터 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 네트워크(300)를 통하여 수신하여 렌더링을 수행한다.
미디어 스토리지는 저장되는 미디어의 종류 또는 형태에 따라 컨텐츠 스토리지 및 UI 리소스 스토리지를 포함할 수 있다.
상세하게는 가입자 단말 장치(210)는 수신된 제어 커맨드를 기반으로 컨텐츠 스토리지로 컨텐츠 리소스의 전송을 요청하고, UI 리소스 스토리지로 UI 리소스의 전송을 요청하여 컨텐츠 스토리지로부터 컨텐츠 리소스를 수신하고, UI 리소스 스토리지로부터 UI 리소스를 수신할 수 있다.
이후, 가입자 단말 장치(210)는 제어부(130)로부터 수신한 제어 커맨드를 기반으로 미디어 스토리지로부터 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 렌더링하거나, 원격 어플리케이션 서버(100)로부터 수신된 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 렌더링한다.
이를 위해, 본 발명의 실시예에 따른 가입자 단말 장치(210)는 상태 정보 생성부(211), 리소스 수신부(212) 및 렌더링부(213)를 포함한다.
상태 정보 생성부(211)는 원격 어플리케이션 서버(100)로부터 수신한 상태 정보 요청에 대응하여 상태 정보를 생성한다.
상태 정보는 컨텐츠 수신 대기 상태나, 사용자 입력의 처리가 필요한 상태와 같은 가입자 단말 장치(210)의 기능을 수행하기 위한 원격 어플리케이션 서버(100)로부터의 제어 커맨드를 대기하는 상태에 대한 정보를 포함할 수 있다.
또한, 상태 정보는 가입자 단말 장치(210)의 디코딩(decoding), 스크린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 중 적어도 어느 하나에 대한 처리 능력(capability) 정보를 포함할 수 있다.
리소스 수신부(212)는 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 요청하고, 상기 요청에 대응하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 수신한다.
UI 리소스는 웹 페이지, 애플리케이션에 대한 비트맵 및 애플리케이션에 대한 그래픽 프리미티브 중 적어도 하나를 이용하여 구현될 수 있다.
실시예에 따라 UI 리소스는 사업자 서비스 및 가입자 단말 장치(210)를 제어하기 위한 사용자 명령을 외부로부터 입력받는 사용자 인터페이스를 포함할 수 있다.
렌더링부(213)는 리소스 수신부(212)로부터 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 수신하여 렌더링한다.
컨텐츠 스토리지를 포함하는 미디어 스토리지는 비디오 컨텐츠, 오디오 컨텐츠, 실시간 TV 방송 프로그램, 주문형 프로그램, SNS 정보, 채팅 메시지, 상품 및 어플리케이션과 같은 컨텐츠를 저장하여 유지할 수 있다.
실시예에 따라, 미디어 스토리지는 MPEG-2 전송 패킷, MPEG-4, DVB 와 같은 특정 프로토콜에 대응하는 포맷의 컨텐츠 또는 특정 프로토콜이 적용되지 않은 컨텐츠를 저장할 수도 있다.
다른 예시로서, 미디어 스토리지는 선정된 방식으로 분할된 컨텐츠를 저장할 수도 있다. 컨텐츠가 실시간 방송 컨텐츠인 경우, 컨텐츠 스토리지는 방송 컨텐츠를 획득하고, 획득된 방송 컨텐츠를 선정된 방식으로 분할하여 분할된 방송 컨텐츠로 저장할 수 있다.
이 경우, 미디어 스토리지는 방송 컨텐츠를 획득하여 저장하기 위해 방송 편성 정보를 별도로 저장 및 관리할 수도 있다.
또한, 렌더링부(213)는 원격 어플리케이션 서버(100)로부터 수신된 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 렌더링한다.
원격 어플리케이션 서버(100)의 상태 정보 수집부(110)는 상태 정보 생성부(2100)로부터 상태 정보를 수신하고, 상태 정보를 수신하는 과정에서의 서비스 환경 정보를 수신하며, 가입자 단말 장치(210)로부터 사용자 프로파일을 분석하여 사용자의 커스트 마이즈 서비스를 추론한다.
원격 어플리케이션 서버(100)의 인터랙션 모드 판단부(120)는 수집된 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 이미지 전송 방식 및 스트리밍 전송 방식 중 적어도 어느 하나로 인터랙션 모드를 판단하고, 제어부(130)는 판단된 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 리소스 수신부(212)로 전송한다.
리소스 수신부(212)를 통해 조합형 UI 리소스를 수신한 렌더링부(213)는 인터랙션 모드를 기반으로 블렌딩된 조합형 UI 리소스를 렌더링한다.
본 발명의 실시예에 따른 가입자 단말 장치(210)는 원격 어플리케이션 서버(100)로부터 수신된 제어 커맨드에 기초하여 미디어 스토리지로의 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나의 요청을 제어하는 단말 장치 제어부(214)를 더 포함할 수 있다.
단말 장치 제어부(214)는 제어 커맨드를 기반으로 컨텐츠 스토리지로 방송 컨텐츠의 전송 요청을 전송하고, 컨텐츠 스토리지는 분할 컨텐츠에 대한 부가 데이터를 검색한 후 해당 요청에 적합한 적어도 하나의 분할 컨텐츠를 추출하며, 이를 합성하여 사용자 컨텐츠로써 가공하여 렌더링부(213)로 전송할 수 있다.
이때, 미디어 스토리지는 해당 컨텐츠를 다운로드 또는 스트리밍 방식으로 가입자 단말 장치(210) 또는 다른 클라이언트 디바이스(미도시)로 전송할 수 있다.
또한, 컨텐츠 스토리지는 클라우드 저장 공간에 방송 컨텐츠, 분할 컨텐츠 및 사용자 컨텐츠 중 적어도 하나를 저장할 수 있고, 사용자가 소지한 복수의 클라이언트 디바이스 간에 컨텐츠에 대한 연속 재생('N-스크린 서비스')이 가능하도록 끊임없이 컨텐츠를 제공할 수도 있다.
또한, 단말 장치 제어부(214)는 원격 어플리케이션 서버(100)로부터 수신된 블렌딩한 조합형 UI 리소스, 미디어 스토리지로부터 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 복수의 영역으로 구분된 스크린에 대응하여 렌더링하도록 제어할 수 있다.
실시예에 따라서, 단말 장치 제어부(214)는 원격 어플리케이션 서버(100)의 인터랙션 모드 판단부(120)에서의 스위칭되는 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 리소스를 복수의 영역에 대응하여 렌더링하도록 제어할 수 있다.
또한, 가입자 단말 장치(210)는 세션 접속, 상태 정보, UI 리소스 및 컨텐츠를 포함하는 리소스, 및 제어 커맨드와 연관된 원격 어플리케이션 서버(100)와의 시그널 패스(signal path)를 형성하는 트랜스포트 모듈(216)을 더 포함할 수 있다. 바람직하게는 상기 시그널 패스는 단일 패스일 수 있다.
원격 어플리케이션 서버(100)는 트랜스포트 모듈(216)의 시그널 패스를 통하여 가입자 단말 장치(210)에 대한 효율적인 제어가 가능하다.
보다 상세하게는 원격 어플리케이션 서버(100)는 트랜스포트 모듈(216)을 통하여 가입자 단말 장치(210)에 설치되는 로컬 어플리케이션에 대하여 보다 효율적으로 제어할 수 있고, 가입자 단말 장치(210)로 서비스의 추가 및 변경을 용이하게 제공할 수 있다.
도 5a 내지 도 5e는 본 발명의 실시예에 따른 스위칭되는 인터랙션 모드의 예를 도시한 것이다.
도 5a를 참조하면, 본 발명의 실시예에 따른 가입자 단말 장치(STB(Legacy))는 스크린 포맷(CONTAINER) 내의 복수의 영역으로 구분된 구성요소들(COMPONENTS)를 포함하고, 구성요소들 각각에 따른 다양한 인터랙션 모드(COMMAND, IMAGE, STRAMING)에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩된 조합형 UI 리소스를 수신하여 렌더링한다.
보다 상세하게는, 본 발명의 실시예에 따른 원격 어플리케이션 서버는 각 구성요소에 따라 인터랙션 모드를 제어 커맨드 방식(COMMAND), 이미지 전송 방식(IMAGE), 스트리밍 전송 방식(STREAMING) 각각으로 판단하거나, 제어 커맨드 방식 및 이미지 전송 방식, 제어 커맨드 방식 및 스트리밍 전송 방식, 이미지 전송 방식 및 스트리밍 전송 방식으로 판단하거나, 제어 커맨드 방식, 이미지 전송 방식 및 스트리밍 전송 방식을 모두 포함하여 판단할 수 있다.
이에 따라, 본 발명의 실시예에 따른 가입자 단말 장치는 제어 커맨드 방식, 이미지 전송 방식 및 스트리밍 전송 방식 중 적어도 어느 하나 이상에 기반하여 블렌딩된 조합형 UI 리소스를 수신하여 렌더링할 수 있다.
도 5b 내지 도 5e를 참조하면, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 스위칭된 인터랙션 모드에 기반하여 블렌딩한 조합형 UI 리소스를 수신하여 렌더링한다.
도 5b를 참조하면, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 이미지 전송 방식에 따라 컨텐츠 리소스 및 UI 리소스를 렌더링하는 과정에서, 원격 어플리케이션 서버로부터 수신되는 인터랙션 모드의 스트리밍 전송 방식이 스위칭되어 블렌딩된 조합형 UI 리소스를 재수신하여 렌더링할 수 있다.
이에 따라, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 제어 커맨드 방식 및 스트리밍 전송 방식에 기초하여 블렌딩된 조합형 UI 리소스 및 미디어 스토리지로부터 수신된 리소스(컨텐츠 리소스 및 UI 리소스)를 렌더링하게 된다.
또한 도 5c를 참조하면, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 스트리밍 전송 방식에 따라 블렌딩된 조합형 UI 리소스를 렌더링하는 과정에서, 원격 어플리케이션 서버로부터 수신되는 인터랙션 모드의 이미지 전송 방식이 스위칭되어 블렌딩된 조합형 UI 리소스를 재수신하여 렌더링할 수 있다.
이에 따라, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 제어 커맨드 방식 및 이미지 전송 방식에 기초하여 미디어 스토리지로부터 수신된 리소스(컨텐츠 리소스 및 UI 리소스)를 렌더링하게 된다.
또한 도 5d를 참조하면, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 제어 커맨드 방식에 따라 미디어 스토리지로부터 수신되는 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 렌더링하는 과정에서, 원격 어플리케이션 서버로부터 수신되는 인터랙션 모드의 이미지 전송 방식이 스위칭되어 블렌딩된 조합형 UI 리소스를 재수신하여 렌더링할 수 있다.
이에 따라, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 이미지 전송 방식 및 스트리밍 전송 방식에 기초하여 블렌딩된 조합형 UI 리소스 및 리소스(컨텐츠 리소스 및 UI 리소스)를 렌더링하게 된다.
또한 도 5e를 참조하면, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 이미지 전송 방식 및 스트리밍 전송 방식에 따라 블렌딩된 조합형 UI 리소스를 수신하여 기설정된 영역에서의 렌더링하는 과정에서, 원격 어플리케이션 서버로부터 수신되는 인터랙션 모드의 제어 커맨드 방식이 스위칭되어 미디어 스토리지로부터 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 요청 및 수신하여 렌더링할 수 있다.
이에 따라, 본 발명의 실시예에 따른 가입자 단말 장치는 원격 어플리케이션 서버로부터 수신된 인터랙션 모드의 제어 커맨드 방식만을 이용하여 미디어 스토리지로부터 수신된 리소스(컨텐츠 리소스 및 UI 리소스)를 렌더링하게 된다.
전술한 바와 같은 인터랙션 모드의 스위칭은 원격 어플리케이션 서버의 판단 및 제어에 의해 수행되며, 원격 어플리케이션 서버는 상태 정보 및 커스트 마이즈 서비스 중 적어도 어느 하나의 변동 사항이 발생하였거나, 가입자 단말 장치에서 요청하는 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나의 용량, 스피드, 버전(version) 및 에러유무 중 적어도 어느 하나 이상을 포함하는 리소스 사양 정보에서의 변동 사항이 발생하였을 경우, 인터랙션 모드를 스위칭하고, 그에 따른 제어 커맨드 및 조합형 UI 리소스를 생성하여 가입자 단말 장치로 전송할 수 있다.
도 6은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs)를 제공하는 시스템에서의 원격 어플리케이션 서버를 통하여 유저 인터페이스를 제공하는 과정을 도시한 흐름도이다.
도 6을 참조하면, 단계 610에서 가입자 단말 장치 및 서비스 환경 중 적어도 어느 하나에 대한 상태 정보를 수집한다.
상태 정보는 가입자 단말 장치가 원격 어플리케이션 서버로부터의 제어 커맨드에 의해 특정 기능을 수행하기 위한 가입자 단말 장치와 연관된 정보일 수 있다.
실시예에 따라서, 상태 정보는 가입자 단말 장치의 디코딩(decoding), 스크린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 중 적어도 어느 하나에 대한 처리 능력(capability)에 대한 사양 정보를 포함할 수 있다.
단계 610은 가입자 단말 장치의 상태 정보의 수집을 위해 네트워크를 통하여 가입자 단말 장치로 상태 정보 요청 신호를 전송하고, 전송된 상태 정보 요청 신호에 대응하여 가입자 단말 장치로부터 상태 정보를 수신하는 단계일 수 있다.
이에 따른 단계 610은 가입자 단말 장치로부터 수신되는 상태 정보로부터 네트워크의 서비스 환경에 대한 상태 정보를 수집할 수 있다.
단계 620에서 사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론한다.
예를 들면, 단계 620은 사용자의 시청 시간, 기능 사용량 및 컨텐츠 사용 이력 중 적어도 어느 하나를 포함하는 사용자 프로파일을 분석하여 적합한 복수의 서비스를 조합하여 커스트마이즈 서비스를 추론하는 단계일 수 있다.
단계 630에서 수집된 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 가입자 단말 장치으로의 제어 커맨드, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드(interaction mode)를 판단한다.
단계 630은 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 제어 커맨드(COMMAND), 이미지 전송 방식(IMAGE) 및 스트리밍 전송 방식(STREAMING) 중 어느 하나의 인터랙션 모드를 판단하는 단계일 수 있다.
단계 640에서 판단된 인터랙션 모드에 기반하여 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나의 전송 요청을 위한 제어 커맨드의 생성을 제어하고, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 가입자 단말 장치로의 전송을 제어한다.
단계 640은 판단된 인터랙션 모드에 기반하여 컨텐츠 스토리지로부터 수신되는 컨텐츠 리소스 및 UI 리소스 스토리지로부터 수신되는 UI 리소스를 수신하여 블렌딩한 조합형 UI 리소스를 셍성하는 단계일 수 있다.
UI 리소스는 웹 페이지, 애플리케이션에 대한 비트맵 및 애플리케이션에 대한 그래픽 프리미티브(graphic primitive) 중 적어도 하나를 이용하여 구현될 수 있다.
컨텐츠 리소스는 비디오 컨텐츠, 오디오 컨텐츠, 실시간 TV 방송 프로그램, 주문형 프로그램 SNS 정보, 채팅 메시지, 상품 및 어플리케이션 중 적어도 어느 하나로 구현될 수 있다.
도 7은 본 발명의 실시예에 따른 하이브리드 유저 인터페이스(UIs)를 제공하는 시스템에서의 가입자 단말 장치를 통하여 유저 인터페이스를 제공하는 과정을 도시한 흐름도이다.
도 7을 참조하면, 단계 710에서 원격 어플리케이션 서버로부터 수신한 상태 정보 요청에 대응하여 상태 정보를 생성한다.
상태 정보는 컨텐츠 수신 대기 상태나, 사용자 입력의 처리가 필요한 상태와 같은 가입자 단말 장치의 기능을 수행하기 위한 어플리케이션 서버로부터의 제어 커맨드를 대기하는 상태에 대한 정보를 포함할 수 있다.
또한, 상태 정보는 가입자 단말 장치의 디코딩, 스크린 포맷 구성 및 이미지 데이터의 오버레이 처리 중 적어도 어느 하나에 대한 처리 능력 정보를 포함할 수 있다.
단계 720에서 원격 어플리케이션 서버로부터 제어 커맨드 및 조합형 UI 리소스를 수신한다.
이 때, 단계 730에서 원격 어플리케이션 서버로부터 제어 커맨드를 수신하였는 지를 판단한다.
단계 730에서 원격 어플리케이션 서버로부터 제어 커맨드를 수신한 경우, 단계 740에서 미디어 스토리지로의 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나에 대해 요청한다.
이후, 단계 750에서 미디어 스토리지로부터 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 렌더링한다.
UI 리소스는 웹 페이지, 애플리케이션에 대한 비트맵 및 애플리케이션에 대한 그래픽 프리미티브 중 적어도 하나를 이용하여 구현될 수 있다.
실시예에 따라 UI 리소스는 사업자 서비스 및 가입자 단말 장치를 제어하기 위한 사용자 명령을 외부로부터 입력받는 사용자 인터페이스를 포함할 수 있다.
컨텐츠 스토리지를 포함하는 미디어 스토리지는 비디오 컨텐츠, 오디오 컨텐츠, 실시간 TV 방송 프로그램, 주문형 프로그램, SNS 정보, 채팅 메시지, 상품 및 어플리케이션과 같은 컨텐츠를 저장하여 유지할 수 있다.
실시예에 따라, 미디어 스토리지는 MPEG-2 전송 패킷, MPEG-4, DVB와 같은 특정 프로토콜에 대응하는 포맷의 컨텐츠 또는 특정 프로토콜이 적용되지 않은 컨텐츠를 저장할 수도 있다.
반면, 단계 730에서 원격 어플리케이션 서버로부터 제어 커맨드를 수신하지 않았을 경우, 단계 760에서 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 렌더링한다.
단계 760은 원격 어플리케이션 서버에서의 상태 정보 및 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 이미지 전송 방식 및 스트리밍 전송 방식의 인터랙션 모드에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 조합형 UI 리소스를 수신하여 렌더링하는 단계일 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (21)

  1. 원격 어플리케이션 서버에 있어서, 상기 원격 어플리케이션 서버는,　컴퓨터로 읽을 수 있는 명령어들을 저장하는 메모리; 및 상기 컴퓨터로 읽을 수 있는 명령어들을 실행하는 하나 이상의 프로세서를 포함하고, 상기 하나 이상의 프로세서는,　
    가입자 단말 장치 및 서비스 환경 중 적어도 어느 하나에 대한 상태 정보를 수집하고,
    사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론하며,
    상기 수집된 상태 정보 및 상기 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 상기 가입자 단말 장치으로의 제어 커맨드, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드(interaction mode)를 판단하고,
    상기 판단된 인터랙션 모드에 기반하여 미디어 스토리지로 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 전송 요청을 위한 상기 제어 커맨드의 생성을 제어하고, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 상기 가입자 단말 장치로의 전송을 제어하며,
    상기 제어 커맨드는, 상기 가입자 단말 장치가 상기 원격 어플리케이션 서버와 분리되어 있는 상기 컨텐츠 리소스 및 UI 리소스 중 적어도 하나를 미디어 스토리지에 요청하도록 구성되고,
    상기 하나 이상의 프로세서는,　
    상기 상태 정보 및 커스트마이즈 서비스 중에서 적어도 하나에서 변경이 발생하거나, 상기 UI 리소스 및 자원 중 적어도 하나에 의해 요청된 컨텐츠의 용량, 속도, 버전, 및 오류 또는 존재 여부 중 적어도 하나를 포함하는 리소스 사양 정보에서 변경이 발생하는 경우, 상기 인터랙션 모드를 스위칭하고,
    상기 판단된 인터랙션 모드에 기초하여 이미지 기반의 조합형 UI 리소스를 전송하고, 상기 수집된 상태 정보에 기초하여 화면을 복수의 영역으로 분할하고, 상기 분할된 영역 각각에 대응하여 상기 판단된 인터랙션 모드에 기초하여 블렌딩된 조합형 UI 리소스를 전송하고,
    상기 상태 정보 및 상기 추론된 커스트마이즈 서비스 중 적어도 하나의 변화를 수집하여 인터랙션 모드를 결정하고, 상기 분할된 영역 각각의 결정 결과로부터 인터랙션 모드를 스위칭하고, 상기 스위칭된 인터랙션 모드에 기초하여 블렌딩된 조합 UI 리소스를 전송하는 것을 특징으로 하는 원격 어플리케이션 서버.
  2. 제1항에 있어서,
    상기 하나 이상의 프로세서는,　
    사용자의 시청 시간, 기능 사용량 및 컨텐츠 사용 이력 중 적어도 어느 하나를 포함하는 상기 사용자 프로파일을 분석하여 적합한 복수의 서비스를 조합하여 상기 커스트마이즈 서비스를 추론하고,
    상기 인터랙션 모드 판단부는
    상기 추론된 커스트마이즈 서비스에 기반하여 상기 조합형 UI 리소스의 제공을 판단하는 것을 특징으로 하는 원격 어플리케이션 서버.
  3. 제2항에 있어서,
    상기 커스트마이즈 서비스는
    상기 시청 시간, 상기 기능 사용량 및 상기 컨텐츠 사용 이력에 대한 레벨 별로 분류된 복수의 서비스의 조합으로 형성되는 것을 특징으로 하는 원격 어플리케이션 서버.
  4. 제1항에 있어서,
    상기 가입자 단말 장치는
    상기 원격 어플리케이션 서버로부터 상기 조합형 UI 리소스를 수신하여 렌더링하고, 상기 수신된 제어 커맨드에 대응하여 상기 미디어 스토리지로 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 요청을 수행하여 수신된 컨텐츠 리소스 및 UI 리소스를 렌더링하는 원격 어플리케이션 서버.
  5. 제1항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 판단된 인터랙션 모드에 기반하여 스트리밍 기반의 조합형 UI 리소스를 상기 가입자 단말 장치로 스트리밍 전송되도록 제어하는 것을 특징으로 하는 원격 어플리케이션 서버.
  6. 제5항에 있어서,
    상기 스트리밍 기반의 조합형 UI 리소스는
    상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나 이상을 블렌딩한 UI 리소스이고,
    상기 하나 이상의 프로세서는,
    상기 스트리밍 기반의 조합형 UI 리소스를 인코딩하여, 상기 인코딩된 스트리밍 기반의 조합형 UI 리소스를 상기 가입자 단말 장치로 스트리밍 전송되도록 제어하는 것을 특징으로 하는 원격 어플리케이션 서버.
  7. 제6항에 있어서,
    상기 가입자 단말 장치는
    상기 스트리밍 전송된 조합형 UI 리소스를 디코딩하여 렌더링하는 원격 어플리케이션 서버.
  8. 삭제
  9. 제1항에 있어서,
    상기 가입자 단말 장치는
    상기 이미지 기반의 조합형 UI 리소스를 수신하여 렌더링하는 원격 어플리케이션 서버.
  10. 삭제
  11. 삭제
  12. 제1항에 있어서,
    상기 가입자 단말 장치는
    상기 스위칭된 인터랙션 모드에 기반하여 상기 블렌딩한 조합형 UI 리소스를 수신하여 상기 복수의 영역에 대응하여 렌더링하는 원격 어플리케이션 서버.
  13. 제1항에 있어서,
    상기 상태 정보는
    상기 가입자 단말 장치의 디코딩(decoding), 스크린 포맷 구성 및 이미지 데이터의 오버레이(overlay) 처리 중 적어도 어느 하나에 대한 처리 능력(capability) 정보를 포함하는 원격 어플리케이션 서버.
  14. 제1항에 있어서,
    상기 상태 정보는
    상기 가입자 단말 장치와 연동하는 디스플레이 장치의 해상도 정보, 디스플레이 화면 회전 정보, 상기 가입자 단말 장치와 연동하는 입력 장치의 디바이스 정보, 및 서비스 가입 정보 중 적어도 어느 하나를 포함하고,
    상기 가입자 단말 장치는
    상기 상태 정보 수집부로부터 수신한 상태 정보 요청에 대응하여 상기 상태 정보를 생성하여 상기 상태 정보 수집부로 전송하는
    원격 어플리케이션 서버.
  15. 가입자 단말 장치에 있어서, 상기 가입자 단말 장치는, 컴퓨터로 읽을 수 있는 명령어들을 저장하는 메모리; 및 상기 컴퓨터로 읽을 수 있는 명령어들을 실행하는 하나 이상의 프로세서를 포함하고, 상기 하나 이상의 프로세서는,
    원격 어플리케이션 서버로부터 수신한 상태 정보 요청에 대응하여 상태 정보를 생성하고,
    상기 원격 어플리케이션 서버로부터 수신된 제어 커맨드를 기반으로 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 요청하고, 상기 요청에 대응하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 수신하며,
    상기 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나, 및 상기 원격 어플리케이션 서버로부터 수신된 인터랙션 모드(interaction mode)에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 렌더링하고,
    상기 미디어 스토리지는,
    상기 원격 어플리케이션 서버와 분리되어 있고, 상기 원격 어플리케이션 서버로부터 수신된 인터렉션 모드에 기초하여 컨텐츠 리소스 및 UI 리소스 중 적어도 하나를 블렌딩하여 조합 UI 리소스를 생성하고,
    상기 원격 어플리케이션 서버는,
    상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 하나에 변경이 발생하거나, 상기 가입자 단말 장치에 의해 요청된 상기 컨텐츠 리소스 및 UI 리소스 중 적어도 하나의 용량, 속도, 버전, 및 에러 유무 중 적어도 하나를 포함하는 리소스 사양 정보에 변경이 발생하면, 상기 인터렉션 모드를 스위칭하고,
    상기 인터랙션 모드에 기초하여 이미지 기반의 조합형 UI 리소스를 전송하고, 화면을 복수의 영역으로 분할하며,
    상기 분할된 각 영역에 대응하는 인터랙션 모드에 기초하여 블렌딩된 UI 리소스는 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 하나의 변화를 수집하여 인터랙션 모드를 결정하고, 분할된 각 영역의 결정 결과로부터 인터랙션 모드를 전환하며, 전환된 인터랙션 모드에 기초하여 블렌딩된 조합 UI 리소스를 전송하는 가입자 단말 장치.
  16. 제15항에 있어서,
    상기 원격 어플리케이션 서버로부터 수신된 상기 제어 커맨드에 기초하여 상기 미디어 스토리지로의 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 요청을 제어하는 단말 장치 제어부
    를 더 포함하는 가입자 단말 장치.
  17. 제16항에 있어서,
    상기 단말 장치 제어부는
    상기 블렌딩한 조합형 UI 리소스, 상기 미디어 스토리지로부터 수신된 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나를 복수의 영역으로 구분된 스크린에 대응하여 렌더링하도록 제어하는 가입자 단말 장치.
  18. 제15항에 있어서,
    상기 상태 정보 생성부는
    입력 장치를 통하여 수신되는 사용자 입력에 대응하는 상기 상태 정보를 생성하는 가입자 단말 장치.
  19. 컴퓨터로 읽을 수 있는 명령어들을 실행하는 하나 이상의 프로세서에 의해 동작하는 하이브리드 유저 인터페이스(UIs) 제공 방법은,
    가입자 단말 장치 및 서비스 환경 중 적어도 어느 하나에 대한 상태 정보를 수집하는 단계;
    사용자 프로파일을 분석하여 사용자의 커스트마이즈 서비스를 추론하는 단계;
    상기 수집된 상태 정보 및 상기 추론된 커스트마이즈 서비스 중 적어도 어느 하나를 기반으로 상기 가입자 단말 장치으로의 제어 커맨드, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상의 제공을 위한 인터랙션 모드(interaction mode)를 판단하는 단계; 및
    상기 판단된 인터랙션 모드에 기반하여 미디어 스토리지로 상기 컨텐츠 리소스 및 상기 UI 리소스 중 적어도 어느 하나의 전송 요청을 위한 상기 제어 커맨드의 생성을 제어하고, 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 상기 가입자 단말 장치로의 전송을 제어하는 단계
    를 포함하고,
    상기 제어 커맨드는, 상기 가입자 단말 장치가 원격 어플리케이션 서버와 분리되어 있는 상기 컨텐츠 리소스 및 UI 리소스 중 적어도 하나를 미디어 스토리지에 요청하도록 구성되고,
    상기 하나 이상의 프로세서는,
    상기 상태 정보 및 커스트마이즈 서비스 중에서 적어도 하나에서 변경이 발생하거나, 상기 UI 리소스 및 자원 중 적어도 하나에 의해 요청된 컨텐츠의 용량, 속도, 버전, 및 오류 또는 존재 여부 중 적어도 하나를 포함하는 리소스 사양 정보에서 변경이 발생하는 경우, 상기 인터랙션 모드를 스위칭하고,
    상기 판단된 인터랙션 모드에 기초하여 이미지 기반의 조합형 UI 리소스를 전송하고, 상기 수집된 상태 정보에 기초하여 화면을 복수의 영역으로 분할하고, 상기 분할된 영역 각각에 대응하여 상기 판단된 인터랙션 모드에 기초하여 블렌딩된 조합형 UI 리소스를 전송하고,
    상기 상태 정보 및 상기 추론된 커스트마이즈 서비스 중 적어도 하나의 변화를 수집하여 인터랙션 모드를 결정하고, 상기 분할된 영역 각각의 결정 결과로부터 인터랙션 모드를 스위칭하고, 상기 스위칭된 인터랙션 모드에 기초하여 블렌딩된 조합 UI 리소스를 전송하는 것을 특징으로 하는 하이브리드 유저 인터페이스(UIs) 제공 방법.
  20. 컴퓨터로 읽을 수 있는 명령어들을 실행하는 하나 이상의 프로세서에 의해 동작하는 하이브리드 유저 인터페이스(UIs) 제공 방법은,
    원격 어플리케이션 서버로부터 수신한 상태 정보 요청에 대응하여 상태 정보를 생성하는 단계;
    상기 원격 어플리케이션 서버로부터 수신된 제어 커맨드를 기반으로 미디어 스토리지로 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 요청하고, 상기 요청에 대응하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나를 수신하는 단계; 및
    상기 수신된 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나, 및 상기 원격 어플리케이션 서버로부터 수신된 인터랙션 모드(interaction mode)에 기반하여 컨텐츠 리소스 및 UI 리소스 중 적어도 어느 하나 이상을 블렌딩(blending)한 조합형 UI 리소스를 렌더링하는 단계
    를 포함하고,
    상기 미디어 스토리지는,
    상기 원격 어플리케이션 서버와 분리되어 있고, 상기 원격 어플리케이션 서버로부터 수신된 인터렉션 모드에 기초하여 컨텐츠 리소스 및 UI 리소스 중 적어도 하나를 블렌딩하여 조합 UI 리소스를 생성하고,
    상기 원격 어플리케이션 서버는,
    상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 하나에 변경이 발생하거나, 가입자 단말 장치에 의해 요청된 상기 컨텐츠 리소스 및 UI 리소스 중 적어도 하나의 용량, 속도, 버전, 및 에러 유무 중 적어도 하나를 포함하는 리소스 사양 정보에 변경이 발생하면, 상기 인터렉션 모드를 스위칭하고,
    상기 인터랙션 모드에 기초하여 이미지 기반의 조합형 UI 리소스를 전송하고, 화면을 복수의 영역으로 분할하며,
    상기 분할된 각 영역에 대응하는 인터랙션 모드에 기초하여 블렌딩된 UI 리소스는 상태 정보 및 추론된 커스트마이즈 서비스 중 적어도 하나의 변화를 수집하여 인터랙션 모드를 결정하고, 분할된 각 영역의 결정 결과로부터 인터랙션 모드를 전환하며, 전환된 인터랙션 모드에 기초하여 블렌딩된 조합 UI 리소스를 전송하는 하이브리드 유저 인터페이스(UIs) 제공 방법.
  21. 제19항 및 제20항 중 어느 한 항의 방법을 수행하기 위하여 컴퓨터로 판독 가능한 기록 매체에 저장된 컴퓨터 프로그램.
KR1020160164760A 2016-12-06 2016-12-06 하이브리드 유저 인터페이스 제공 시스템 및 그 방법 KR102594608B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160164760A KR102594608B1 (ko) 2016-12-06 2016-12-06 하이브리드 유저 인터페이스 제공 시스템 및 그 방법
US15/828,432 US10708648B2 (en) 2016-12-06 2017-12-01 System for providing hybrid user interfaces and method thereof
EP17205672.3A EP3334168A1 (en) 2016-12-06 2017-12-06 System for providing hybrid user interfaces and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160164760A KR102594608B1 (ko) 2016-12-06 2016-12-06 하이브리드 유저 인터페이스 제공 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20180064647A KR20180064647A (ko) 2018-06-15
KR102594608B1 true KR102594608B1 (ko) 2023-10-26

Family

ID=60629472

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160164760A KR102594608B1 (ko) 2016-12-06 2016-12-06 하이브리드 유저 인터페이스 제공 시스템 및 그 방법

Country Status (3)

Country Link
US (1) US10708648B2 (ko)
EP (1) EP3334168A1 (ko)
KR (1) KR102594608B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11544585B2 (en) 2018-11-13 2023-01-03 Disney Enterprises, Inc. Analyzing viewer behavior in real time
CN111538877A (zh) * 2020-03-19 2020-08-14 北京三快在线科技有限公司 数据展现方法、装置、电子设备和计算机可读介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100194753A1 (en) * 2000-08-07 2010-08-05 Robotham John S Device-Specific Content Versioning
US20160134910A1 (en) * 2014-08-05 2016-05-12 Charter Communications Operating, Llc Provider Equipment Generation Of Customer User Interface
US20160142784A1 (en) * 2014-11-19 2016-05-19 Alticast Corporation System and method for providing cloud based user interfaces

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060184968A1 (en) * 2005-02-11 2006-08-17 Clayton Richard M Automatic content update for a target device
US8843853B1 (en) * 2006-12-05 2014-09-23 At&T Mobility Ii Llc Home screen user interface for electronic device display
US20110185378A1 (en) * 2010-01-28 2011-07-28 Moses Johnson Systems For Rich Media Channel Distribution
US9354939B2 (en) * 2010-05-28 2016-05-31 Red Hat, Inc. Generating customized build options for cloud deployment matching usage profile against cloud infrastructure options
US20110296460A1 (en) * 2010-05-31 2011-12-01 Samsung Electronics Co., Ltd. Method and apparatus for providing remote user interface (ui) service
US20130091525A1 (en) 2011-10-07 2013-04-11 Kt Corporation Method and apparatus for providing cloud-based user menu
US20150256443A1 (en) * 2012-09-27 2015-09-10 Nec Corporation Method for transmitting image information and packet communication system
JP6310073B2 (ja) * 2013-12-26 2018-04-11 株式会社スクウェア・エニックス・ホールディングス 描画システム、制御方法、及び記憶媒体
US9807146B2 (en) * 2014-11-19 2017-10-31 Alticast Corporation System and method for providing cloud based user interfaces
US9998793B2 (en) * 2015-09-25 2018-06-12 Rovi Guides, Inc. Methods and systems for determining at a present time a date at a future time at which a media asset will become available from the content provider
US10205982B2 (en) * 2015-09-25 2019-02-12 Rovi Guides, Inc. Methods and systems for managing media subscriptions
US10162853B2 (en) * 2015-12-08 2018-12-25 Rovi Guides, Inc. Systems and methods for generating smart responses for natural language queries
US11062220B2 (en) * 2016-05-31 2021-07-13 Accenture Global Solutions Limited Integrated virtual cognitive agents and message communication architecture
US10725759B2 (en) * 2016-10-03 2020-07-28 Avaya Inc. Web application system and method to dynamically select between local installed and cloud-based resources
US11016180B2 (en) * 2017-09-25 2021-05-25 Waymo Llc Combination photodetector arrays for extended dynamic range

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100194753A1 (en) * 2000-08-07 2010-08-05 Robotham John S Device-Specific Content Versioning
US20160134910A1 (en) * 2014-08-05 2016-05-12 Charter Communications Operating, Llc Provider Equipment Generation Of Customer User Interface
US20160142784A1 (en) * 2014-11-19 2016-05-19 Alticast Corporation System and method for providing cloud based user interfaces

Also Published As

Publication number Publication date
US10708648B2 (en) 2020-07-07
US20180160168A1 (en) 2018-06-07
EP3334168A1 (en) 2018-06-13
KR20180064647A (ko) 2018-06-15

Similar Documents

Publication Publication Date Title
US9338479B2 (en) Virtualizing user interface and set top box functionality while providing media over network
US9807146B2 (en) System and method for providing cloud based user interfaces
US20220408120A1 (en) Live media content delivery systems and methods
KR102380673B1 (ko) 클라우드 기반 유저 인터페이스 제공 시스템 및 그 방법
US20140223502A1 (en) Method of Operating an IP Client
US20220256253A1 (en) Interactive live media systems and methods
US20130135179A1 (en) Control method and device thereof
KR102284295B1 (ko) 클라우드 기반 유저 인터페이스 제공 시스템 및 그 방법
US10764627B2 (en) System for deployment of value-added services over digital broadcast cable
US9912996B2 (en) System and method for providing cloud based user interfaces
KR102594608B1 (ko) 하이브리드 유저 인터페이스 제공 시스템 및 그 방법
US20240080507A1 (en) Systems and methods for implementing primary/secondary configuration data to reduce an amount of configuration data that needs to be centrally stored for large-scale distribution
KR20130066432A (ko) 클라우드 기반의 ｉｐｔｖ 서비스 제공 방법 및 장치
US10057647B1 (en) Methods and systems for launching multimedia applications based on device capabilities
KR102471989B1 (ko) 클라우드 기반 유저 인터페이스 제공 시스템 및 그 방법
KR102516415B1 (ko) 클라우드 기반 유저 인터페이스 제공 시스템 및 그 방법
CN111629250A (zh) 一种显示设备及视频播放方法
CN111683272A (zh) 一种流媒体播放方法及显示设备
US10075759B2 (en) Pseudo-interactive program guide over a local network
CN115604496A (zh) 一种显示设备、直播切台方法及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant