DE102019101986A1 - Device for playback control for content dual streaming - Google Patents

Device for playback control for content dual streaming Download PDF

Info

Publication number
DE102019101986A1
DE102019101986A1 DE102019101986.9A DE102019101986A DE102019101986A1 DE 102019101986 A1 DE102019101986 A1 DE 102019101986A1 DE 102019101986 A DE102019101986 A DE 102019101986A DE 102019101986 A1 DE102019101986 A1 DE 102019101986A1
Authority
DE
Germany
Prior art keywords
content
moving picture
streaming
unit
playback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102019101986.9A
Other languages
German (de)
Inventor
Dong Hyon Kim
Min Su Kang
Jae Yong An
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cot Connected Co Ltd
Original Assignee
Cot Connected Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cot Connected Co Ltd filed Critical Cot Connected Co Ltd
Publication of DE102019101986A1 publication Critical patent/DE102019101986A1/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4385Multiplex stream processing, e.g. multiplex stream decrypting
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • G09G5/377Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385Channel allocation; Bandwidth allocation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42653Internal components of the client ; Characteristics thereof for processing graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0613The adjustment depending on the type of the information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G09G2340/125Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/02Networking aspects
    • G09G2370/022Centralised management of display operation, e.g. in a server instead of locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

Die vorliegende Erfindung bezieht sich auf eine Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming (100) umfassend: eine Inhaltsanalyse-Engine-Einheit (150), die das Vorhandensein oder Nichtvorhandensein eines Bewegtbildes in einem Multimediainhalt erkennt, einen Wiedergabebereich des Bewegtbildes analysiert und den Multimediainhalt modifiziert, um den UI (User Interface)-Inhalt, dessen Wiedergabebereich ausgeblendet ist, und die Bewegtbild-bezogenene Videoquelle zu erzeugen; eine Cloud-Stationseinheit (160) zum Empfangen des Multimediainhalts zum Zweck eines Lieferns des Multimediainhalts an die Inhaltsanalyse-Engine-Einheit (150) und zum Empfangen des UI-Inhalts und der Videoquelle von der Inhaltsanalyse-Engine-Einheit (150); und eine Inhaltswiedergabe-Steuereinheit (170) zum Empfangen des UI-Inhalts und der Videoquelle und zum direkten Abrufen des Bewegtbildes basierend auf der Videoquelle, um den mit dem Bewegtbild überlagerten UI-Inhalt auf den Bildschirm wiederzugeben.

Figure DE102019101986A1_0000
The present invention relates to a content control device for content dual streaming (100) comprising: a content analysis engine unit (150) that detects the presence or absence of a moving picture in a multimedia content, analyzes a reproducing area of the moving picture, and the like Modified multimedia content to produce the UI (User Interface) content, the playback area of which is hidden, and the moving image-related video source; a cloud station unit (160) for receiving the multimedia content for the purpose of delivering the multimedia content to the content analysis engine unit (150) and for receiving the UI content and the video source from the content analysis engine unit (150); and a content playback control unit (170) for receiving the UI content and the video source and for directly retrieving the moving image based on the video source to display the UI content overlaid with the moving image on the screen.
Figure DE102019101986A1_0000

Description

Technisches GebietTechnical field

Die vorliegende Erfindung betrifft eine Technologie für Vorrichtungen zur Wiedergabesteuerung für Inhalts-Dual-Streaming basierend auf einem Cloud-Streaming-Dienst. Genauer gesagt, bezieht sich diese Erfindung auf eine Vorrichtung zur Wiedergabesteuerung für Inhalts-Dual-Streaming, die eine effiziente Echtzeit-Bewegtbild-Wiedergabe dadurch ermöglicht, dass das Bewegtbild-Streaming und das UI(User Interface)-Streaming bei einer einen Bewegtbildinhalt einschließenden UI(User Interface)-Anwendung in separaten Kanälen getrennt sind.The present invention relates to technology for playback control devices for content dual streaming based on a cloud streaming service. More specifically, this invention relates to a content dual streaming playback control apparatus that enables efficient real-time motion picture playback by providing motion picture streaming and UI (User Interface) streaming in a moving picture content UI (User Interface) application are separated in separate channels.

Hintergrund der ErfindungBackground of the Invention

Eine Set-Top-Box (STB) ist ein Gerät, durch das man terrestrische, Kabel- und Satellitenübertragungen zu Hause empfängt und dadurch fernsieht. Durch das Anschließen einer Set-Top-Box über eine Telefonleitung (oder eine Standleitung) ist es möglich, Programme über ein Fernsehgerät anzusehen, auf das Internet zuzugreifen oder diese als Haussicherungsgerät zu nutzen.A set-top box (STB) is a device through which you can receive terrestrial, cable and satellite transmissions at home and thereby watch TV. By connecting a set-top box via a telephone line (or a dedicated line), it is possible to watch programs on a television, access the Internet or use them as a home security device.

Darüber hinaus spielt sie eine Rolle als Medienintegrationslösung, mit der Benutzer auf verschiedene Inhalte wie Filme, Musik, Spiele, Shopping und Bildung im Internet zugreifen können, indem sie, ähnlich wie bei einem herkömmlichen VTR, an den Fernseher angeschlossen wird, der für moderne Menschen eines der bekanntesten Medien ist.It also plays a role as a media integration solution that allows users to access various content such as movies, music, games, shopping and education on the Internet by connecting it to the television, similar to a conventional VTR, which is for modern people is one of the best known media.

Mit einer Set-Top-Box und einem neuen Konzept mit integrierter Multimedia-Plattform, kann man Heimkino mit DVD geniessen und Satellitenrundfunk mit vielfältigen Informationen nutzen.With a set-top box and a new concept with an integrated multimedia platform, you can enjoy home cinema with DVD and use satellite broadcasting with a wide range of information.

Mit einer auf einer Cloud-Plattform basierenden Set-Top-Box-Technologie braucht man in seiner Set-Top-Box keine Rechenressourcen, wie eine Anwendung, einen Speicher, ein Betriebssystem und ein Sicherheitssystem mehr zu installieren; stattdessen kann ein solcher Dienst im virtuellen Raum, der durch eine Virtualisierungstechnologie erzeugt wird, jederzeit nach Auswahl und Bedarf zur Verfügung gestellt werden. Mit anderen Worten, hat eine derartige Technologie den Vorteil, dass mit einer Set-Top-Box mit einem Zentralprozessor von eher niedriger Leistung eine relativ reibunglose Verwendung eines qualitativ hochwertigen Multimedia-Inhaltedienstes, der normalerweise höhere Leistung erfordert, gewährleistet werden kann. Die App-Engine von Google oder Naver ist ein gutes Beispiel dafür.With set-top box technology based on a cloud platform, you no longer need to install computing resources such as an application, a memory, an operating system and a security system in your set-top box; instead, such a service in virtual space, which is generated by virtualization technology, can be made available at any time according to choice and need. In other words, such technology has the advantage that a set-top box with a rather low performance central processor can ensure relatively smooth use of a high quality multimedia content service that normally requires higher performance. The Google or Naver app engine is a good example of this.

Der Cloud-Streaming-Dienst, ein auf einer Cloud-Computing-Umgebung basierter Dienst, wird so ausgeführt dass die Inhalte wie eine Web-Anwendung unter Verwendung der Serverressourcen auf der Serverseite ausgeführt werden, dann der Ausführungsbildschirm erfasst und als GUI-Bildschirm kodiert und in Echtzeit auf die Terminalseite übertragen werden, während nur die Eingabe und die Ausgabe dafür auf der Terminalseite ausgeführt werden, was es einem Benutzer ermöglichen kann, Anwendungen oder Inhalte, die Hochleistungs-Rechenressourcen erfordern, unabhängig von den Spezifikationen des Terminals zu verwenden.The cloud streaming service, a service based on a cloud computing environment, is executed so that the content is executed like a web application using the server resources on the server side, then the execution screen is captured and encoded as a GUI screen and transmitted in real time to the terminal side while only the input and output therefor are performed on the terminal side, which may allow a user to use applications or content that require high performance computing resources regardless of the specifications of the terminal.

Mit einer herkömmlichen Set-Top-Box-Technologie, die auf einer Cloud-Plattform basiert, soll der Großteil der Inhalts-Wiedergabesteuerung über den Cloud-Server ausgeführt werden. Dies führt zu einer relativen Kommunikationsüberlastung des Cloud-Servers, die hinsichtlich einer Zeitverzögerung nachteilig ist.With a conventional set-top box technology, which is based on a cloud platform, the majority of the content playback control is to be carried out via the cloud server. This leads to a relative communication overload of the cloud server, which is disadvantageous in terms of a time delay.

Die koreanische veröffentlichte ungeprüfte Patentanmeldung Nr. 10-2012-0095724 (29. August 2012) bezieht sich auf ein Verfahren und ein System zum Bereitstellen einer Benutzerumgebung für eine Set-Top-Box, die mit einem auf Cloud-Computing basierenden Rundfunknetzwerk verbunden ist, die Serverinformationen in Echtzeit in einer Cloud-Computing-Umgebung gemäß den Dienstbedingungen für jeden Benutzer bereitstellt.The Korean Published Unexamined Patent Application No. 10-2012-0095724 (August 29, 2012) relates to a method and system for providing a user environment for a set-top box that is connected to a broadcasting network based on cloud computing, according to the server information in real time in a cloud computing environment provides the terms of service for each user.

Bei diesem Cloud-Computing-System führt der zentrale Server die Informationsverarbeitung mit einem Verfahren durch, das die folgenden Schritte umfasst: (A) Erfassen von Informationen über die Benutzerumgebung der Set-Top-Box eines Benutzers von mindestens einem vorbestimmten Hauptsystem; (B) Empfangen einer Dienstnutzungsanfrage gemäß den Informationen über die Benutzerumgebung von der Set-Top-Box des Benutzers; (C) Durchführen von einer oder mehreren Operationen zur Erzeugung, Bestimmung und Speicherung der Ressourcen, die nach den Informationen über die Benutzerumgebung bereitgestellt wurden; und (D) Übertragen von Konfigurations-Informationen zu der Set-Top-Box zur Verfügung durch den Benutzer.In this cloud computing system, the central server carries out the information processing with a method comprising the following steps: (A) collecting information about the user environment of the set-top box of a user from at least one predetermined main system; (B) receiving a service usage request according to the user environment information from the user's set-top box; (C) performing one or more operations to create, determine, and store the resources provided after the information about the user environment; and (D) transmitting configuration information to the set-top box available for the user.

Das koreanische erteilte Patent Nr. 10-1325025 (29. Oktober 2013) bezieht sich auf eine auf einer Set-Top-Box basierten Cloud-Service-Technologie zur Herstellung einer Hybrid Cloud, die ein Konzept einer Private Cloud mit einem Public-Cloud-Server kombiniert, um die Sicherheit, die Skalierbarkeit der Speicherkapazität und die Datenverwaltungsfunktion zu verbessern. Bei dieser Erfindung handelt es sich um eine Cloud-Service-Technologie, die auf einer Set-Top-Box basiert, wobei die Private Cloud für den bestehenden digitalen Rundfunkdienst aktiv an jedes private Zuhause verteilt wird und ein privater Cloud-Teil unter Verwendung einer Set-Top-Box verwaltet wird, die mit dem Betreiber über ein Netzwerk verbunden wurde.The Korean Patent No. 10-1325025 issued (October 29, 2013) relates to a set-top box-based cloud service technology for the production of a hybrid cloud, which combines a concept of a private cloud with a public cloud server for security, scalability to improve storage capacity and data management functionality. This invention is a cloud service technology based on a set-top box, with the private cloud for the existing digital broadcasting service being actively distributed to every private home and a private cloud part using a set -Top box is managed, which was connected to the operator via a network.

Dieses Verfahren soll durch die folgenden Schritte durchgeführt werden: Ausführen einer Cloud-Anwendung durch ein Benutzerterminal; wobei das Benutzerterminal die Auswahl einer Private Cloud in der Cloud-Anwendung identifiziert; wobei die Private-Cloud-Einrichtung des Benutzerterminals eine Set-Top-Box identifiziert, die einer Private Cloud des Benutzerterminals entspricht; wobei die Private-Cloud-Einrichtung den Einschaltzustand der identifizierten Set-Top-Box identifiziert; wobei die VPN (Virtual Private Network)-Einrichtung der Private Cloud ein VPN zwischen dem Benutzerendgerät und der Set-Top-Box konfiguriert; wobei die Lese-und Schreibeinrichtung der Private-Cloud-Einrichtung Lesen und Schreiben von Daten gemäß einer Private Cloud in die STB-Speichereinheit der Set-Top-Box unter Verwendung des konfigurierten VPN ausführt. This process is intended to be accomplished through the following steps: running a cloud application through a user terminal; wherein the user terminal identifies the selection of a private cloud in the cloud application; wherein the private cloud device of the user terminal identifies a set-top box that corresponds to a private cloud of the user terminal; the private cloud device identifying the switched-on state of the identified set-top box; wherein the VPN (Virtual Private Network) device of the private cloud configures a VPN between the user terminal and the set-top box; wherein the reading and writing device of the private cloud device reads and writes data according to a private cloud into the STB storage unit of the set-top box using the configured VPN.

Stand-der-Technik-DruckschriftenStand-the-art-documents

Patentliteraturpatent literature

  • Patentliteratur 1: koreanische veröffentlichte ungeprüfte Patentanmeldung Nr. 10-2012-0095724 (29. August 2012)Patent literature 1: Korean Published Unexamined Patent Application No. 10-2012-0095724 (August 29, 2012)
  • Patentliteratur 2: koreanisches erteiltes Patent Nr. 10-1325025 (29. Oktober 2013)Patent literature 2: Korean Patent Grant No. 10-1325025 (October 29, 2013)

Inhalt der ErfindungContent of the invention

Technische Aufgabe zur Lösung des ProblemsTechnical problem to solve the problem

Eine Aufgabe der vorliegenden Erfindung besteht darin, eine Wiedergabe-Steuervorrichtung (Steuereinheit) für Inhalts-Dual-Streaming bereitzustellen, die ein Bewegtbild-Streaming und ein UI-Streaming in separaten Kanälen trennen und diese in Echtzeit in einer UI-Anwendung, die die Bewegtbild-Inhalte enthält, wiedergeben kann.An object of the present invention is to provide a playback controller (control unit) for content dual streaming which separate moving picture streaming and UI streaming in separate channels and these in real time in a UI application which displays the moving picture - Contains content that can be played.

Eine andere Aufgabe der vorliegenden Erfindung besteht darin, eine Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming bereitzustellen, die UI-Inhalte, die mit dem Bewegtbild entfernt wurden, auf einem anderen Bewegtbild überlagern kann.Another object of the present invention is to provide a content dual streaming playback control apparatus which can overlay UI content removed with the moving picture on another moving picture.

Noch eine weitere Aufgabe der vorliegenden Erfindung besteht darin, eine Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming bereitzustellen, die in der Lage ist, die Bewegtbilder in einem ausgeblendeten Wiedergabebereich des aktuell wiedergegebenen UI-Inhalts in verschiedenen Maßstäben wiederzugeben und ein Werbebild direkt abzurufen und dieses in dem Wiedergabebereich für das Bewegtbild zu überlagern.A still further object of the present invention is to provide a content control device for dual streaming content capable of displaying the moving pictures in a hidden display area of the currently displayed UI content at various scales and directly retrieving an advertising image and overlay this in the playback area for the moving image.

Lösung der AufgabeSolution of the task

Bei den Ausführungsbeispielen umfasst die Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming verschiedene Vorrichtungen, umfassend
eine Inhaltsanalyse-Engine-Einheit, die erfasst, ob ein Bewegtbild in den Multimediainhalten vorhanden ist, den Wiedergabebereich der Bewegtbilder analysiert, die Multimediainhalte modifiziert, und die UI (User Interface)-Inhalte, in denen der Wiedergabebereich ausgeblendet ist, und eine Videoquelle für die Bewegtbilder erzeugt;
eine Cloud-Stationseinheit, die den Multimediainhalt empfängt, diesen an die Inhaltsanalyse-Engine-Einheit liefert, und den UI-Inhalt und die Videoquelle von der Inhaltsanalyse-Engine-Einheit empfängt; und
eine Inhaltswiedergabe-Steuereinheit, die den UI-Inhalt und die Videoquelle empfängt, und nach dem direkten Abrufen des Bewegtbildes auf Basis der Videoquelle und Überlagern des UI-Inhalts darauf den UI-Inhalt auf dem Bildschirm wiedergibt.
In the embodiments, the content control device for content dual streaming includes various devices
a content analysis engine unit that detects whether there is a moving picture in the multimedia content, analyzes the playback area of the moving pictures, modifies the multimedia content, and the UI (User Interface) content in which the playback area is hidden, and a video source for the moving pictures generated;
a cloud station unit that receives the multimedia content, delivers it to the content analysis engine unit, and receives the UI content and video source from the content analysis engine unit; and
a content playback control unit that receives the UI content and the video source and, after directly retrieving the moving image based on the video source and overlaying the UI content thereon, displays the UI content on the screen.

Die Inhaltsanalyse-Engine-Einheit kann, wenn sie das Vorhandensein des Bewegtbildes in dem Multimediainhalt erfasst, beim Analysieren des Wiedergabebereiches des Bewegtbildes den UI-Inhalt rekonstruieren, nachdem sie den Bewegtbild-Wiedergabebereich in der UI auf Basis der Analyse entfernt hat.The content analysis engine unit, if it detects the presence of the moving picture in the multimedia content, can reconstruct the UI content when analyzing the reproducing area of the moving picture after removing the moving picture reproducing area in the UI based on the analysis.

Die Inhaltsanalyse-Engine-Einheit kann eine Videoquelle erzeugen, die URL-Link-Informationen enhält, die die Größe der UI-Inhalte, bei denen der Wiedergabebereich des Bewegtbildes ausgeblendet ist, und die Größe und die Position des Wiedergabebereich des ausgeblendeten Bewegtbildes und die Bewegtbilder direkt abrufen kann.The content analysis engine unit may generate a video source containing URL link information, the size of the UI content with the moving area of the moving picture hidden, and the size and position of the playing area of the hidden moving picture and the moving pictures can call directly.

Dabei kann die Inhaltswiedergabe-Steuereinheit unter Verwendung der Bewegtbild-Link-Informationen, die in der Bewegtbild-Quelle enthalten sind, die von der Cloud-Station-Einheit empfangen wurden, direkt Streaming-Daten des Bewegtbildes von der Streaming-Stationseinheit abrufen und kann die Streaming-Daten des Bewegtbildes durch Verwendung der Positionsinformationen über den Bewegtbild-Wiedergabebereich, der in der Bewegtbildquelle enthalten ist, in Echtzeit an einer Bildschirmposition wiedergeben, die der leeren Position des UI-Inhalts entspricht.At this time, the content playback control unit can directly retrieve streaming data of the moving image from the streaming station unit using the moving picture link information contained in the moving picture source received from the cloud station unit, and can Play back the streaming data of the moving picture in real time at a screen position corresponding to the empty position of the UI content by using the position information about the moving picture reproduction area included in the moving picture source.

Die Inhaltswiedergabe-Steuereinheit kann die Streaming-Daten des Bewegtbildes entsprechend der Größe der leeren Stelle im UI-Inhalt nach den Größeninformationen über den Wiedergabebereichs des Bewegtbilds, das in der Bewegtbildquelle enthalten ist, in Echtzeit wiedergeben, indem die Größe der Streaming-Daten des Bewegtbildes verändert wird.The content reproduction control unit can play back the streaming data of the moving picture in real time according to the size of the empty space in the UI content according to the size information about the reproduction area of the moving picture contained in the moving picture source by the size of the streaming data of the moving picture is changed.

Die Inhaltswiedergabe-Steuereinheit erfasst, ob eine leere Stelle zwischen dem Bewegtbild und dem überlagerten UI-Inhalt vorhanden ist, und analysiert den Wiedergabefehler und kann dadurch mindestens eines unter der Größe und der Position des Bewegtbildes und die Überlagerungsposition des UI-Inhalts korrigieren. The content reproduction control unit detects whether there is an empty space between the moving picture and the superimposed UI content, and analyzes the reproduction error and can thereby correct at least one of the size and position of the moving picture and the overlay position of the UI content.

Die Inhaltswiedergabe-Steuereinheit kann das Bewegtbild mit der Auflösung entsprechend der Bildschirmauflösung wiedergeben, indem die Auflösung zu der Bildschirmauflösung umgewandet wird.The content playback control unit can display the moving image with the resolution corresponding to the screen resolution by converting the resolution to the screen resolution.

Die Inhaltswiedergabe-Steuereinheit kann, nachdem sie entweder das Werbebild direkt empfangen oder durch Verwendung der Bewegtbild-Link-Informationen, die in der Bewegtbildquelle enthalten sind, von der Streaming-Stationseinheit direkt empfangen hat, entweder das Werbebild oder ein dieses enthaltendes Bewegtbild im Bewegtbild-Wiedergabebereich des Bildschirms wiedergeben.The content playback control unit, after either receiving the commercial image directly or by using the moving image link information contained in the moving image source, received directly from the streaming station unit, either the commercial image or a moving image containing it in the moving image. Play the display area of the screen.

Wirkung der ErfindungEffect of the invention

Es ist nicht so zu verstehen, dass eine bestimmte Ausführungsform alle der folgenden Effekte einschließen soll, oder nur bestimmte der folgenden Effekte umfassen soll. Es ist daher nicht so zu verstehen, dass der Umfang der Rechte in Bezug auf die offenbarte Technologie dadurch beschränkt wird.It is not to be understood that a particular embodiment should include all of the following effects, or should include only certain of the following effects. Therefore, it should not be construed to limit the scope of rights with respect to the technology disclosed.

Gemäß einer Ausführungsform der vorliegenden Erfindung kann die Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming eine reibungslose Wiedergabe des Bewegtbildes in Echtzeit dadurch ermöglichen, dass sie das übrige UI-Streaming nach der Entfernung des Bewegtbild-Streamings sowie das Bewgtbild, wenn dieses in UI-Anwendungen verbleibt, in separaten Kanälen trennt, was zur Beseitigung einer Zeitverzögerung aufgrund einer Kommunikationsüberlastung in der Cloud-Station dient.According to an embodiment of the present invention, the playback control device for content dual streaming can enable smooth playback of the moving picture in real time by having the remaining UI streaming after removal of the moving picture streaming and the moving picture when it is in UI- Applications remain separated in separate channels, which eliminates a time delay due to communication overload in the cloud station.

Wie anhand einer beispielhaften Ausführungsform der vorliegenden Erfindung gezeigt, kann die Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming die Bewegtbilder in verschiedenen Maßstäben, beispielsweise durch Verringern oder Vergrößern der Größe eines Bewegtbildes in einem ausgeblendeten Wiedergabebereich eines aktuell wiedergegebenen UI-Inhalts, wiedergeben.As shown in an exemplary embodiment of the present invention, the content control device for dual streaming content can display the moving pictures in various scales, for example, by reducing or enlarging the size of a moving picture in a hidden display area of a currently displayed UI content.

Gemäß einer Ausführungsform der vorliegenden Erfindung kann die Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming eine zusätzliche Servicefunktion für Werbung durchführen, indem sie das Werbebild direkt abruft und es auf dem Bewegtbild-Wiedergabebereich des aktuell wiedergegebenen UI-Inhalts überlagert.According to an embodiment of the present invention, the playback control device for content dual streaming can perform an additional service function for advertising by directly retrieving the advertising image and overlaying it on the moving image playback area of the UI content currently being reproduced.

Figurenlistelist of figures

  • 1 ist eine Ansicht zum Erläutern einer Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming gemäß einer Ausführungsform der vorliegenden Erfindung. 1 11 is a view for explaining a content dual streaming playback controller according to an embodiment of the present invention.
  • 2 ist eine Ansicht zum Erläutern einer in 1 gezeigten Inhaltsanalyse-Engine-Einheit. 2 Fig. 14 is a view for explaining one in 1 shown content analysis engine unit.
  • 3 ist eine Ansicht zum Erläutern einer in 1 gezeigten Inhaltswiedergabe-Steuereinheit. 3 Fig. 14 is a view for explaining one in 1 shown content playback control unit.
  • 4 ist ein Flussdiagramm, das einen Prozess zum Steuern der Wiedergabe für Inhalts-Dual-Streaming mit der in 1 gezeigten Inhaltswiedergabe-Steuervorrichtung veranschaulicht. 4 FIG. 5 is a flowchart illustrating a process for controlling playback for content dual streaming with the one in FIG 1 illustrated content playback control device.
  • 5 ist eine beispielhafte Darstellung, die einen Wiedergabebildschirm bei einem Inhalts-Dual-Streaming mit der in 1 gezeigten Inhaltswiedergabe-Steuereinheit erläutert. 5 FIG. 14 is an explanatory diagram showing a playback screen in content dual streaming with the one shown in FIG 1 shown content playback control unit.

Ausführliche Beschreibung zur Durchführung der ErfindungDetailed description for carrying out the invention

Die Beschreibung der vorliegenden Erfindung ist lediglich eine beispielhafte strukturelle oder funktionale Erläuterung. Daher sollte der Schutzumfang der vorliegenden Erfindung nicht auf die im Text beschriebenen Ausführungsformen beschränkt angesehen werden. Das heißt, es ist so zu verstehen, dass die Ausführungsformen verschiedenartig ausgeführt werden und verschiedene Formen aufweisen können, wobei der Schutzumfang der vorliegenden Erfindung Äquivalente umfassen sollte, die die technischen Ideen verwirklichen können. Es ist auch so zu verstehen, dass der Schutzumfang der vorliegenden Erfindung nicht als darauf beschränkt angesehen werden sollte, da nicht gemeint ist, dass die spezifische Ausführungsform alle der Aufgaben oder der Effekte der vorliegenden Erfindung umfassen soll oder nur bestimmte der dargelegten Wirkungen einschliessen kann.The description of the present invention is merely an exemplary structural or functional explanation. Therefore, the scope of the present invention should not be considered limited to the embodiments described in the text. That is, it is to be understood that the embodiments may be embodied in various forms and the scope of the present invention should include equivalents that the technical ideas can implement. It is also to be understood that the scope of the present invention should not be construed as being limited thereto, since it is not meant that the specific embodiment is intended to encompass all of the objects or effects of the present invention or to include only some of the effects set forth.

Im Zusammenhang mit der Anmeldung sind die in der vorliegenden Beschreibung verwendeten Ausdrücke wie folgt zu verstehen.In connection with the application, the terms used in the present description are to be understood as follows.

Die Ausdrücke „erster“, „zweiter“ und dergleichen sollen ein Element von einem anderen unterscheiden, und der Schutzumfang sollte nicht durch diese Ausdrücke beschränkt werden. Beispielsweise kann die erste Komponente die zweite Komponente bezeichnen, und in ähnlicher Weise kann die zweite Komponente umgekehrt die erste Komponente bezeichnen.The terms "first", "second" and the like are intended to distinguish one element from another, and the scope should not be limited by these terms. For example, the first component may designate the second component, and similarly, the second component may conversely designate the first component.

Es versteht sich, dass, wenn ein Element als mit einem anderen Element „verbunden“ bezeichnet wird, es direkt mit dem anderen Element verbunden sein kann, jedoch möglicherweise andere Elemente dazwischen vorhanden sein können. Wenn andererseits angegeben ist, dass ein Element mit einem anderen Element „direkt verbunden“ ist, versteht es sich, dass sich keine anderen Elemente dazwischen befinden. Andererseits sollten auch andere Ausdrücke, die die Beziehung zwischen Komponenten beschreiben, wie „zwischen“ und „unmittelbar zwischen“ oder „benachbart zu“ und „direkt benachbart zu“, ebenfalls so wie oben interpretiert werden.It is understood that when an element is said to be “connected” to another element, it is directly connected to the other element may be, but there may be other elements in between. On the other hand, if it is stated that an element is “directly connected” to another element, it is understood that there are no other elements in between. On the other hand, other expressions that describe the relationship between components, such as “between” and “immediately between” or “adjacent to” and “directly adjacent to” should also be interpreted as above.

Die singuläre Darstellung sollte so verstanden werden, dass sie Pluralrepräsentationen umfasst, sofern der Kontext nicht eindeutig etwas anderes vorschreibt. Es versteht sich, dass die Ausdrücke wie „umfassen“ oder „haben“ das Vorhandensein eines oder mehrerer anderer dargelegter Merkmale, Zahlen, Schritte, Bewegungen, Elemente, Teile oder Kombinationen davon angeben sollen, sie jedoch nicht das Vorhandensein oder Hinzufügen eines oder mehrerer anderer Merkmale, Zahlen, Schritte, Bewegungen, Elemente, Teile oder Kombinationen davon ausschließen sollen.The singular representation should be understood to include plural representations unless the context clearly dictates otherwise. It is understood that the terms such as “include” or “have” are intended to indicate the presence of one or more of the other features, numbers, steps, movements, elements, parts, or combinations thereof presented, but not the presence or addition of one or more others Features, numbers, steps, movements, elements, parts or combinations thereof are to be excluded.

Bei jedem Schritt wird der Identifikationscode (z. B. a, b, c usw.) zur Vereinfachung der Beschreibung verwendet; der Identifikationscode beschreibt jedoch nicht die Reihenfolge der Schritte. Wenn die Reihenfolge der Schritte nicht deutlich angegeben wird, kann sie von der angegebenen Reihenfolge abweichen. Das heißt, jeder Schritt kann in der gleichen Reihenfolge wie beschrieben erfolgen, oder kann im Wesentlichen gleichzeitig oder in umgekehrter Reihenfolge ausgeführt werden.At each step, the identification code (e.g. a, b, c, etc.) is used to simplify the description; however, the identification code does not describe the order of the steps. If the order of the steps is not clearly stated, it may differ from the order given. That is, each step can be done in the same order as described, or can be performed essentially simultaneously or in reverse order.

Wenn nicht anders definiert, haben alle hier verwendeten Ausdrücke dieselbe Bedeutung, wie sie üblicherweise von einem Fachmann auf dem Gebiet, zu dem diese Erfindung gehört, verstanden wird. Häufig verwendete vordefinierte Ausdrücke sollten dahingehend interpretiert werden, dass sie mit der Bedeutung im Zusammenhang mit dem Stand der Technik übereinstimmen, und sie können nicht als ideal oder übermäßig formell interpretiert werden, wenn sie nicht ausdrücklich in der vorliegenden Anmeldung definiert sind.Unless otherwise defined, all terms used herein have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Commonly used predefined terms should be interpreted as being consistent with the meaning related to the prior art, and cannot be interpreted as ideal or overly formal unless they are expressly defined in the present application.

1 ist eine Ansicht zum Erläutern einer Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming gemäß einer Ausführungsform der vorliegenden Erfindung. 1 11 is a view for explaining a content dual streaming playback controller according to an embodiment of the present invention.

Wie in 1 gezeigt, umfasst eine Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming 100 eine Streaming-Stationseinheit 110, eine Multimediainhalts-Stationseinheit 120, eine Lizenz-Stationseinheit 130, eine Transkodierungs-Stationseinheit 140, eine Inhaltsanalyse-Engine-Einheit 150, eine Cloud-Stationseinheit 160, eine Inhaltswiedergabe-Steuereinheit 170 und eine Anzeige-Stationseinheit 180, die mit dem Netzwerk verbunden oder elektrisch damit verbunden sein kann.As in 1 shown includes a content dual streaming playback controller 100 a streaming station unit 110 , a multimedia content station unit 120 , a license station unit 130 , a transcoding station unit 140 , a content analysis engine unit 150 , a cloud station unit 160 , a content playback control unit 170 and a display station unit 180 that can be connected to or electrically connected to the network.

Die Streaming-Stationseinheit 110 kann einen Streaming-Dienst für einen bestimmten Inhalt bereitstellen und spielt die einem Server entsprechende Rolle, die gespeicherten Daten oder die von dem Kodierungsserver übertragenen Live-Daten an die Inhaltswiedergabe-Steuereinheit 170 oder die Transkodierungs-Stationseinheit 140 zu übertragen.The streaming station unit 110 can provide a streaming service for a specific content and plays the role corresponding to a server, the stored data or the live data transmitted from the coding server to the content reproduction control unit 170 or the transcoding station unit 140 transferred to.

Streaming ist hier eines der Videoübertragungsverfahren und bezieht sich auf eine Technik, die eine Übertragung in Echtzeit dadurch ermöglichen kann, dass sie die ausgewählte Inhaltsdatei nur mit einem beschränkten Betrag an Echtzeitwiedergabe in Übereinstimmung mit der Netzwerksituation des Benutzers anstelle eines Downloadverfahrens überträgt.Streaming is one of the video transmission methods here and relates to a technique that can enable real-time transmission by transmitting the selected content file with only a limited amount of real-time playback in accordance with the user's network situation instead of a download method.

Bei einer Ausführungsform kann die Streaming-Stationseinheit 110, wenn sie eine Streaming-Anforderung für einen bestimmten Inhalt von der Inhaltswiedergabe-Steuereinheit 170 empfängt, die Übertragung der Streaming-Datei durchführen, indem sie die Streaming-Datei in eine Vielzahl von fragmentierten Dateien unterteilt und einen Header, der Verknüpfungen mit anderen Fragmenten bereitstellt, hinzufügt. Die Inhaltswiedergabe-Steuereinheit 170 kann die zugehörigen fragmentierten Dateien beim Empfangen gleichzeitig extrahieren und dekomprimieren, so dass sie daraus die Bewegtbilder oder den Ton durch Verwendung eines Ansteuerungsprogramms wiedergeben kann.In one embodiment, the streaming station unit 110 when they have a streaming request for specific content from the content playback control unit 170 receives, perform the streaming file transmission by dividing the streaming file into a plurality of fragmented files and adding a header that provides links to other fragments. The content playback control unit 170 can simultaneously extract and decompress the associated fragmented files when it is received so that it can play back the moving images or the sound using a control program.

Wenn bei einer Ausführungsform die Streaming-Stationseinheit 110 eine Streaming-Anforderung für einen bestimmten Inhalt von der Transkodierungs-Stationseinheit 140 empfängt, kann sie die Streaming-bezogenen fragmentierten Dateien an die Transkodierungs-Stationseinheit 140 übertragen, und die Transkodierungs-Stationseinheit 140 kann wiederum die zugehörigen fragmentierten Dateien gleichzeitig nach dem Umkodieren an die Inhaltswiedergabe-Steuereinheit 170 übertragen.If, in one embodiment, the streaming station unit 110 a streaming request for specific content from the transcoding station unit 140 receives, the streaming-related fragmented files to the transcoding station unit 140 transmitted, and the transcoding station unit 140 can in turn transfer the associated fragmented files to the content playback control unit simultaneously after the encoding 170 transfer.

Die Multimediainhalts-Stationseinheit 120 entspricht einer Middleware (Software-Engine), die Inhalte in der Inhaltswiedergabe-Steuereinheit 170 über HTTP (Hyper Text Transfer Protocol) im Internet ausführt.The multimedia content station unit 120 corresponds to a middleware (software engine), the content in the content playback control unit 170 via HTTP (Hyper Text Transfer Protocol) on the Internet.

Die Multimediainhalts-Stationseinheit 120 kann eine Programmausführungsumgebung und eine Datenbankverbindungsfunktion bereitstellen und eine Vielzahl von Transaktionen verwalten, und sie kann eine Geschäftslogik zum Verarbeiten von Aufgaben ausführen.The multimedia content station unit 120 can provide a program execution environment and database connectivity and manage a variety of transactions, and can execute business logic to process tasks.

Die Lizenz-Stationseinheit 130 entspricht einem Server, der eine Funktion zum Ausgeben einer Lizenz auf eine Anforderung der Cloud-Stationseinheit 160 ausführt, indem sie nach Informationen eines Benutzers, der die Inhaltswiedergabe-Steuereinheit 170 verwendet, gemäß einer Anforderung der Cloud-Stationseinheit 160 anfrägt, und eine Lizenz in Bezug auf ein Nutzungsrecht zur Verwendung des spezifischen Inhalts des Benutzers an die Cloud-Stationseinheit 160 ausgibt. The license station unit 130 corresponds to a server that has a function to issue a license upon request of the cloud station unit 160 executes by looking for information from a user who is the content playback control unit 170 used, according to a requirement of the cloud station unit 160 requests, and a license regarding a right to use the specific content of the user to the cloud station unit 160 outputs.

Die Transkodierungs-Stationseinheit 140 empfängt den gesamten oder einen Teil des spezifischen Inhalts von der Streaming-Stationseinheit 110 und transkodiert den Inhalt. Sie kann die transkodierte und gepufferte Datei in Echtzeit an die Inhaltswiedergabe-Steuereinheit 170 übertragen.The transcoding station unit 140 receives all or part of the specific content from the streaming station unit 110 and transcodes the content. It can send the transcoded and buffered file in real time to the content playback control unit 170 transfer.

Bei einer Ausführungsform erkennt die Transkodierungs-Stationseinheit 140 die Notwendigkeit der Transkodierung des betroffenen Inhalts auf der Basis eines Streaming-Wiedergabe-Pfads, der die Inhalts-Wiedergabe-Codec-Beschreibung und die URL (Uniform Resource Locator)-Adresse enthält, die mit bestimmten Inhalten verknüpft ist, die zuvor von der Inhaltswiedergabe-Steuereinheit 170 bereitgestellt wurden. Wenn die Transkodierung erforderlich ist, kann die Transkodierungs-Stationseinheit 140 den in der Beschreibung des Inhaltswiedergabe-Codec enthaltenen Codec bestimmen und den betroffenen Inhalt transkodieren.In one embodiment, the transcoding station unit recognizes 140 the need to transcode the affected content based on a streaming playback path that includes the content playback codec description and the URL (Uniform Resource Locator) address associated with certain content previously from the content playback -Steuereinheit 170 were provided. If transcoding is required, the transcoding station unit can 140 determine the codec contained in the description of the content playback codec and transcode the content concerned.

Beispielsweise kann die Transkodierungs-Stationseinheit 140 anhand der URL-Adresse des spezifischen Inhalts, der zuvor von der Inhaltswiedergabe-Steuereinheit 170 bereitgestellt wurde, und der Inhaltswiedergabe-Codec-Beschreibung bestimmen, ob der betroffene Inhalt einem Codec entspricht, der von der Inhaltswiedergabe-Steuereinheit 170 wiedergegeben werden kann.For example, the transcoding station unit 140 based on the URL address of the specific content previously provided by the content playback control unit 170 and the content playback codec description determine whether the content concerned corresponds to a codec used by the content playback control unit 170 can be played.

Wenn der Inhalt dem wiedergabemöglichen Codec entspricht, kann die Transkodierungs-Stationseinheit 140 die Inhaltswiedergabe-Steuereinheit 170 darüber informieren, dass der Inhalt direkt angefordert und von der Streaming-Stationseinheit 110 gesandt werden kann.If the content corresponds to the reproducible codec, the transcoding station unit can 140 the content playback control unit 170 inform that the content is requested directly and from the streaming station unit 110 can be sent.

Wenn der Inhalt nicht dem Codec entspricht, der wiedergegeben werden kann, kann sie den entsprechenden Inhalt basierend auf der URL-Adresse direkt von der Streaming-Station 110 empfangen, und nach der Transkodierung an die Inhaltswiedergabe-Steuereinheit 170 übertragen.If the content does not match the codec that can be played, it can get the corresponding content based on the URL address directly from the streaming station 110 received, and after transcoding to the content playback control unit 170 transfer.

Die Inhaltsanalyse-Engine-Einheit 150 kann das Vorhandensein oder Nichtvorhandensein eines Bewegtbildes aus den von der Cloud-Stationseinheit 160 bereitgestellten Multimediainhalten erkennen und den Bewegtbild-Wiedergabebereich analysieren, wodurch sie eine UI-Quelle mit den ausgeblendeten Wiedergabe-Bereichen und eine Videoquelle (Größe, Ort, URL usw.), die sich auf das Bewegtbild bezieht, generieren kann, indem sie den Multimediainhalt basierend auf dem Analyseergebnis modifiziert.The content analysis engine unit 150 can be the presence or absence of a moving image from the cloud station unit 160 Recognize provided multimedia content and analyze the moving picture playback area, whereby it can generate a UI source with the hidden playing areas and a video source (size, location, URL, etc.) related to the moving picture by based on the multimedia content modified on the analysis result.

Die Cloud-Stationseinheit 160 ist ein virtueller privater Server, der das Cloud-Computing für die Inhaltswiedergabe-Steuereinheit 170 in Verbindung mit der Multimediainhalts-Stationseinheit 120, der Lizenz-Stationseinheit 130, der Inhaltsanalyse-Engine-Einheit 150 und der Inhaltswiedergabe-Steuereinheit 170 bereitstellen kann. Es ist ein virtueller privater Server, der mit einer Virtualisierungstechnologie implementiert werden kann, die einen physischen Server zur Verwendung als mehrere unterteilte virtuelle Server ermöglichen kann.The cloud station unit 160 is a virtual private server that hosts cloud computing for the content playback control unit 170 in connection with the multimedia content station unit 120 , the license station unit 130 , the content analysis engine unit 150 and the content playback control unit 170 can provide. It is a virtual private server that can be implemented with virtualization technology that can enable a physical server to be used as multiple, divided virtual servers.

Cloud-Computing ist hier eine internetbasierte Computertechnologie für webbasierte Softwaredienste, bei der ein Programm auf einem Versorger-Datenserver im Internet platziert wird, und bezieht sich auf einen webbasierten Softwaredienst, wodurch die Verwendung der Inhaltswiedergabe-Steuereinheit 170, die einem Gerät wie einem Computer, einem Mobiltelefon oder einem anderen Gerät entsprechen kann, für ein Abrufen zu jeder Zeit ermöglicht wird.Cloud computing here is an Internet-based computer technology for web-based software services, in which a program is placed on a provider data server on the Internet, and relates to a web-based software service, which means the use of the content playback control unit 170 that may correspond to a device such as a computer, a cellular phone, or other device, for retrieval at any time.

Die Inhaltswiedergabe-Steuereinheit 170 kann ein Computergerät sein, das Inhalte durch Verbindung mit der Streaming-Stationseinheit 110, der Transkodierungs-Stationseinheit 140, der Cloud-Stationseinheit 160 und der Anzeige-Stationseinheit 180 wiedergeben kann. Zum Beispiel kann die Inhaltswiedergabe-Steuereinheit 170 als Set-Top-Box, Desktop, Notebook, Tablet-PC oder Smartphone implementiert sein.The content playback control unit 170 can be a computing device that content through connection to the streaming station unit 110 , the transcoding station unit 140 , the cloud station unit 160 and the display station unit 180 can play. For example, the content playback control unit 170 can be implemented as a set-top box, desktop, notebook, tablet PC or smartphone.

Die Inhaltswiedergabe-Steuereinheit 170 erfasst die Notwendigkeit einer Lizenz, die mit der Wiedergabe des Inhalts verbunden ist, und kann durch Interaktion mit der Cloud-Stationseinheit 160 die Wiedergabe des Inhalts bis zur Erteilung der Lizenz von der Lizenz-Stationseinheit 130 an die Cloud-Stationseinheit 160 verzögern lassen. Sie kann eine derartige Steuerung durchführen, dass, wenn die Lizenzausgabe abgeschlossen ist, sie den Inhalt wiedergibt und der Inhalt durch die Anzeige-Stationseinheit 180 angezeigt wird.The content playback control unit 170 captures the need for a license associated with content playback and can by interacting with the cloud station unit 160 the reproduction of the content until the license is issued by the license station unit 130 to the cloud station unit 160 let delay. It can perform such control that when the license issue is completed, it reproduces the content and the content by the display station unit 180 is shown.

Bei einer Ausführungsform empfängt die Inhaltswiedergabe-Steuereinheit 170 sowohl den auf die Inhaltswiedergabe bezogenen UI-Inhalt (User Interface) als auch die VideoQuelle (Größe, Ort, URL usw.), die sich auf den ausgeblendeten UI-Inhalt bezieht, von der Cloud-Stationseinheit 160. Und sie kann das Bewegtbild durch direktes Anfordern des Bewegtbilds an die Streaming-Stationseinheit 110 auf der Grundlage der Bewegtbild-Quelle empfangen. Wenn das Bewegtbild empfangen wird, kann sie eine derartige Steuerung durchführen, dass das Bewegtbild in Echtzeit über die Anzeige-Stationseinheit 180 auf dem Bildschirm wiedergegeben und visualisiert wird.In one embodiment, the content rendering controller receives 170 Both the UI content (user interface) related to the content reproduction and the video source (size, location, URL, etc.) relating to the hidden UI content from the cloud station unit 160 , And it can do the moving picture by directly requesting the moving picture to the streaming station unit 110 received based on the moving image source. When the moving picture is received, it can perform such control that the moving picture in real time via the display station unit 180 is displayed and visualized on the screen.

Die Anzeige-Stationseinheit 180 entspricht einer Bildanzeigevorrichtung, die mit der Inhaltswiedergabe-Steuereinheit 170 verbunden ist und die Inhaltswiedergabedaten visuell ausdrücken kann, die von der Inhaltswiedergabe-Steuereinheit 170 empfangen werden. Beispielsweise kann die Anzeige-Stationseinheit 180 als ein Fernseher oder ein Monitor implementiert sein.The display station unit 180 corresponds to an image display device provided with the content playback control unit 170 is connected and can visually express the content playback data by the content playback control unit 170 be received. For example, the display station unit 180 implemented as a television or monitor.

2 ist eine Ansicht zum Erläutern der in 1 gezeigten Inhaltsanalyse-Engine-Einheit. 2 Fig. 14 is a view for explaining the in 1 shown content analysis engine unit.

Wie in 2 gezeigt, kann die Inhaltsanalyse-Engine-Einheit 150 eine Inhaltsanalyse-Einheit 151 und eine UI-Rekonstruktions-Einheit 153 enthalten.As in 2 shown, the content analysis engine unit 150 a content analysis unit 151 and a UI reconstruction unit 153 contain.

Die Inhaltsanalyse-Einheit 151 empfängt die Multimediainhalte von der Cloud-Stationseinheit 160, erfasst, ob ein Bewegtbild vorhanden ist und analysiert den Wiedergabebereich des Bewegtbildes, wenn das Vorhandensein des Bewegtbilds erfasst wird.The content analysis unit 151 receives the multimedia content from the cloud station unit 160 , detects whether there is a moving picture and analyzes the playback area of the moving picture when the presence of the moving picture is detected.

Bei einer Ausführungsform kann die Inhaltsanalyse-Einheit 151 den Inhalt durch Inhaltsanalyse bestimmen. Im Fall von Bewegtbildern kann die Inhaltsanalyse-Einheit 151 Szenenänderungs-Informationen, Farb-Informationen und Orts-Informationen durch einen umfassenden Vergleich identifizieren.In one embodiment, the content analysis unit 151 determine the content through content analysis. In the case of moving images, the content analysis unit 151 Identify scene change information, color information and location information through a comprehensive comparison.

Die UI-Rekonstruktionseinheit 153 kann die UI-Inhalte rekonstruieren, indem sie die Multimedia-Inhalte basierend auf der Analyse der Inhaltsanalyse-Einheit 151 modifiziert, um den Bewegtbildbereich in dem UI zu entfernen.The UI reconstruction unit 153 can reconstruct the UI content by analyzing the multimedia content based on the content analysis unit 151 modified to remove the moving image area in the UI.

Bei einer Ausführungsform kann die UI-Rekonstruktions-Einheit 153 den Inhalt rekonstruieren, indem sie den Wiedergabebereich des Bewegtbildes ausblendet und die VideoQuelle, die sowohl die Größeninformationen, die Ortsinformationen des Wiedergabebereichs des ausgeblendeten Bewegtbildes als auch die URL-Link-Informationen, die das betrofffene Bewegtbild abrufen kann, generiert. Bei einer Ausführungsform kann die Videoquelle über JavaScript bereitgestellt werden, das als eine Art Programmiersprache behandelt wird.In one embodiment, the UI reconstruction unit 153 Reconstruct the content by hiding the playback area of the moving image and generating the video source, which generates both the size information, the location information of the playback area of the hidden moving image and the URL link information which the affected moving image can retrieve. In one embodiment, the video source can be provided via JavaScript, which is treated as a type of programming language.

Bei einer Ausführungsform im Fall eines Content Provider (beispielsweise YouTube oder Naver), der mit einem CDN (Contents Delivery Network; System zum Speichern von Daten in einem verteilten Server zur Übermittlung von Inhalten an den Benutzer mit dem Zweck einer effizienten Übermittlung) aufgebaut wurde, befindet sich die Streaming-Stationseinheit 110, die dem originalen Server entspricht, an einem bestimmten Ort, während sich die Replikationsserver ferner in verschiedenen Bereichen befinden können, um die Anzahl der gleichzeitigen Zugriffe abzudecken. In dem Fall, wenn das in dem ausgewählten UI-Inhalt vorhandene Bewegtbild einem Inhaltsanbieter zugeordnet ist, der einen solchen CDN-Dienst konfiguriert hat, kann die Videoquelle nicht nur die URL-Adresse, die das Bewegtbild von der dem ursprünglichen Server entsprechenden Streaming-Stationseinheit 110 empfangen kann, sondern auch die anderen URL-Adressen, die das Bewegtbild von einer anderen Streaming-Stationseinheit empfangen können, die sich in dem anderen Ort befindet, umfassen.In one embodiment, in the case of a content provider (for example YouTube or Naver) that was built using a CDN (Contents Delivery Network; system for storing data in a distributed server for transmitting content to the user with the purpose of efficient transmission), is the streaming station unit 110 , which corresponds to the original server, in a specific location, while the replication servers can also be located in different areas in order to cover the number of simultaneous accesses. In the event that the moving image present in the selected UI content is assigned to a content provider that has configured such a CDN service, the video source cannot only get the URL address that the moving image is from the streaming station unit corresponding to the original server 110 but can also include the other URL addresses that the moving image can receive from another streaming station unit located in the other location.

Die Streaming-Daten und die Bewegtbildquelle des von der UI-Rekonstruktionseinheit 153 rekonstruierten UI-Inhalts können für die Cloud-Stationseinheit 160 bereitgestellt werden.The streaming data and the moving image source from the UI reconstruction unit 153 Reconstructed UI content can be used for the cloud station unit 160 to be provided.

3 ist ein Diagramm zum Erläutern der Inhaltswiedergabe-Steuereinheit, die in 1 gezeigt ist. 3 FIG. 11 is a diagram for explaining the content reproduction control unit shown in FIG 1 is shown.

Wie in 3 gezeigt, kann die Inhaltswiedergabe-Steuereinheit 170 eine Bewegtbild-Streaming-Empfangseinheit 171, eine Skalen-Umwandlungseinheit 173, eine Überlagerungseinheit 175, eine Fehlerkorrektur-Einheit 177 und eine Dual-Streaming-Wiedergabeeinheit 179 umfassen.As in 3 shown, the content playback control unit 170 a moving picture streaming receiving unit 171 , a scale conversion unit 173 , an overlay unit 175 , an error correction unit 177 and a dual streaming playback unit 179 include.

Die Bewegtbild-Streaming-Empfangseinheit 171 erhält die URL-Link-Informationen zum direkten Abrufen des Bewegtbilds des entsprechenden UI-Inhalts von der Bewegtbildquelle, die von der Cloud-Stationseinheit 160 empfangen wird, und kann, auf ihre direkte Aufforderung an die Streaming-Stationseinheit 110, die dem UI-Inhalt entsprechenden Streaming-Daten des Bewegtbilds empfangen.The moving picture streaming receiving unit 171 obtains the URL link information for directly retrieving the moving image of the corresponding UI content from the moving image source, that of the cloud station unit 160 is received, and can, at its direct request to the streaming station unit 110 that receive streaming data of the moving image corresponding to the UI content.

Bei einer Ausführungsform empfängt die Bewegtbild-Streaming-Empfangseinheit 171 auch Werbebilder zusammen mit dem Empfang der Bewegtbild-Streaming-Daten und kann es so arrangieren, dass die Dual-Streaming-Wiedergabeeinheit 179 entweder die Werbebilder mit den Bewegtbildern zusammen wiedergibt oder die Werbebilder für eine vorbestimmte Zeitdauer vor oder nach der Bewegtbildwiedergabe wiedergibt.In one embodiment, the moving picture streaming receiving unit receives 171 also commercials along with the receipt of moving picture streaming data and can arrange it so that the dual streaming playback unit 179 either reproduces the advertising images together with the moving images or reproduces the advertising images for a predetermined period of time before or after the moving image is reproduced.

Die Skalen-Umwandlungseinheit 173 kann die Größe der empfangenen Bewegtbild-Streaming-Daten durch Verwendung der Größeninformation über einen Wiedergabebereich des Bewegtbildes, das in der Bewegtbildquelle enthalten ist, variieren, um sie so der Größe des Wiedergabebereichs des ausgeblendeten Bewegtbildes des auf dem separaten Kanal empfangenen UI-Inhalts anzupassen.The scale conversion unit 173 The size of the received moving picture streaming data may vary by using the size information about a playback area of the moving picture included in the moving picture source so as to match the size of the playback area of the adjust the hidden moving image of the UI content received on the separate channel.

Bei einer Ausführungsform kann die Skalen-Umwandlungseinheit 173 die Größe des Bewegtbildes im Vergleich zu dem Wiedergabebereich vergrößern oder verkleinern.In one embodiment, the scale conversion unit 173 enlarge or reduce the size of the moving image compared to the playback area.

Die Skalen-Umwandlungseinheit 173 kann die Auflösung des Bewegtbilds basierend auf der Bildschirmauflösung der Anzeige-Stationseinheit 180 so umwandeln, dass sie mit der Anzeigeumgebung der Anzeige-Stationseinheit 180 übereinstimmt.The scale conversion unit 173 can change the resolution of the moving image based on the screen resolution of the display station unit 180 convert it to match the display environment of the display station unit 180 matches.

In einer Ausführungsform kann die Skalen-Umwandlungseinheit 173 die Auflösung des Bewegtbildes gemäß der Bildschirmauflösung der Anzeige-Stationseinheit 180 umwandeln, indem sie die Auflösung des Bewegtbildes entsprechend der Bildschirmauflösung der Anzeige-Stationseinheit 180 je nach dem Grad der Bildschirmauflösung zu einer niedrigen Auflösung oder zu einer höheren Auflösung variiert.In one embodiment, the scale conversion unit 173 the resolution of the moving image according to the screen resolution of the display station unit 180 convert by changing the resolution of the moving image according to the screen resolution of the display station unit 180 Varies to a lower resolution or a higher resolution depending on the degree of screen resolution.

Die Überlagerungseinheit 175 kann die Streaming-Daten des von der Cloud-Stationseinheit 160 empfangenen UI-Inhalts auf dem aktuell wiedergegebenen Bewegtbild überlagern.The overlay unit 175 can the streaming data from the cloud station unit 160 overlay the received UI content on the currently playing moving image.

Die Fehlerkorrektur-Einheit 177 erfasst, ob eine leere Stelle zwischen dem wiederzugebenden Bewegtbild und dem darauf überlagerten UI-Inhalt vorhanden ist, analysiert den Wiedergabe-Fehler und weist die Skalen-Umwandlungseinheit 173 an, das Bewegtbild zu vergrößern oder verkleinern, oder die wiedergegebene Position des Bewegtbildes zu korrigieren, während sie veranlasst, dass die Überlagerungsposition des UI-Inhalts durch die Überlagerungseinheit 175 korrigiert wird.The error correction unit 177 detects whether there is an empty space between the moving image to be reproduced and the UI content superimposed thereon, analyzes the reproduction error and assigns the scale conversion unit 173 to enlarge or reduce the moving image, or to correct the reproduced position of the moving image while causing the overlay position of the UI content by the overlay unit 175 is corrected.

Die Dual-Streaming-Wiedergabeeinheit 179 kann die Streaming-Daten des Bewegtbildes in Echtzeit an einer bestimmten Position auf dem Bildschirm der Anzeige-Stationseinheit 180 durch Verwendung der in der Bewegtbildquelle enthaltenen Positionsinformationen über den Bewegtbild-Wiedergabebereich wiedergeben, wobei die überlagerten Streaming-Daten des UI-Inhalts in Echtzeit zusammen wiedergegeben werden. Zu diesem Zeitpunkt kann das Bewegtbild aktuell auf dem ausgeblendeten Bewegtbild-Wiedergabebereich vom Bildschirm der Anzeige-Stationseinheit 180 überlagert auf dem UI-Inhalt wiedergegeben betrachtet werden.The dual streaming playback unit 179 can display the streaming data of the moving image in real time at a specific position on the screen of the display station unit 180 play back using the position information contained in the moving picture source via the moving picture reproduction area, the superimposed streaming data of the UI content being reproduced together in real time. At this time, the moving picture can currently be on the hidden moving picture display area from the screen of the display station unit 180 can be viewed superimposed on the UI content.

Die Dual-Streaming-Wiedergabeeinheit 179 kann entweder das Werbebild für eine vorbestimmte Zeit bei der Bewegtbildwiedergabe gleichzeitig wiedergeben oder das Werbebild separat für eine vorbestimmte Zeit vor dem Bewegtbildwiedergabe wiedergegeben lassen.The dual streaming playback unit 179 can either display the advertising image simultaneously for a predetermined time in the moving image display or have the advertising image displayed separately for a predetermined time before the moving image display.

Bei einer Ausführungsform kann die Dual-Streaming-Wiedergabeeinheit 179 die Werbungsbild-Wiedergabezeit je nach der Bildfrequenz (R) des Bewegtbildes und der Benutzerinformation bestimmen. CMplaytime = In R/G

Figure DE102019101986A1_0001
In one embodiment, the dual streaming playback unit 179 determine the advertising image playback time depending on the frame rate (R) of the moving image and the user information. CMplaytime = In R / G
Figure DE102019101986A1_0001

Hierbei ist R die Video-Frame-Übertragungsrate und G ist die Benutzerklasse gemäß Kundenbewertung des Benutzers, der aktuell den Inhalt verwendet (z. B. G 1: nichtzahlender Kunde, G2: zahlender Kunde, G3: Premiumkunde)Here R is the video frame transmission rate and G is the user class according to the customer rating of the user who is currently using the content (e.g. G 1: non-paying customer, G2: paying customer, G3: premium customer)

Die Dual-Streaming-Wiedergabeeinheit 179 kann für den Premiumkunden das Werbebild gar nicht oder mit einer minimalen Zeitdauer wiedergeben, und die Wiedergabedauer für das Werbebild-Wiedergeben in der Reihenfolge des zahlenden Kunden und des nichtzahlenden Kunden angeben.The dual streaming playback unit 179 cannot display the advertising image for the premium customer at all or with a minimal period of time, and can specify the display period for displaying the advertising image in the order of the paying customer and the non-paying customer.

4 ist ein Flussdiagramm zum Erläutern eines Prozesses zum Steuern der Inhalts-Dual-Streaming-Wiedergabe in der in 1 gezeigten Inhalts-Dual-Streaming-Wiedergabesteuervorrichtung. 4 FIG. 14 is a flowchart for explaining a process for controlling content dual streaming playback in the FIG 1 content dual streaming playback control device shown.

Wie in 4 gezeigt, empfängt die Cloud-Stationseinheit 160 zuerst den Multimediainhalt von der Multimediainhalts-Stationseinheit 120 und stellt ihn der Inhaltsanalyse-Engine-Einheit 150 zur Verfügung (Schritt S410).As in 4 shown, receives the cloud station unit 160 first the multimedia content from the multimedia content station unit 120 and presents it to the content analysis engine unit 150 available (step S410 ).

Zweitens erfasst die Inhaltsanalyse-Engine-Einheit 150 das Vorhandensein oder Nichtvorhandensein eines Bewegtbildes in den von der Cloud-Stationseinheit 160 empfangenen Multimediainhalten und analysiert den Bewegtbild-Wiedergabebereich (Schritt S420).Second, the content analysis engine unit captures 150 the presence or absence of a moving image in the from the cloud station unit 160 received multimedia content and analyzes the moving image playback area (step S420 ).

Drittens kann die Inhaltsanalyse-Engine-Einheit 150 den Wiedergabebereich des analysierten Bewegtbildes hinsichtlich der leeren Stelle modifizieren, und sowohl den ausgeblendeten UI-Inhalt als auch eine Videoquelle, die Informationen zu Größe, Position und URL-Link in Bezug auf die Bewegtbilder enthält, erzeugen. (Schritt S430).Third, the content analysis engine unit 150 modify the playback area of the analyzed moving picture with regard to the empty position, and generate both the hidden UI content and a video source which contains information on size, position and URL link in relation to the moving pictures. (Step S430 ).

Viertens empfängt die Cloud-Stationseinheit 160 den UI-Inhalt und die Videoquelle von der Inhaltsanalyse-Engine-Einheit 150 und stellt den UI-Inhalt und die Videoquelle der Inhaltswiedergabesteuereinheit 170 zur Verfügung (Schritt S440).Fourth, the cloud station unit receives 160 the UI content and video source from the content analysis engine unit 150 and provides the UI content and video source of the content playback control unit 170 available (step S440 ).

Fünftens erhält die Inhaltswiedergabesteuereinheit 170 direkt die Streaming-Daten des Bewegtbilds von der Streaming-Stationseinheit 110 auf der Grundlage der URL-Link-Information unter den Bewegtbildquellen, die von der Cloud-Stationseinheit 160 empfangen werden, und ändert die Größe des Bewegtbildes entsprechend dem Bewegtbild-Wiedergabebereich basierend auf der Größeninformation (Schritt S450).Fifth, the content reproduction control unit receives 170 directly the streaming data of the moving image from the streaming station unit 110 based on the URL link information among the moving image sources provided by the cloud station unit 160 received and changes the Size of the moving picture corresponding to the moving picture reproduction area based on the size information (step S450 ).

Sechstens überlagert die Inhaltswiedergabe-Steuereinheit 170 die Streaming-Daten des von der Cloud-Stationseinheit 160 empfangenen UI-Inhalts auf dem größenmäßig umgewandelten Bewegtbild (Schritt S460).Sixth, the content playback control unit overlays 170 the streaming data from the cloud station unit 160 received UI content on the resized moving image (step S460 ).

Siebtens gibt die Inhaltswiedergabesteuereinheit 170 in Echtzeit das mit dem UI-Inhalt überlagerte Bewegtbild auf dem Bildschirm der Anzeige-Stationseinheit 180 auf der Grundlage der Positionsinformationen des Bewegtbildes unter der Videoquelle wieder (Schritt S470).Seventh, the content reproduction control unit gives 170 in real time the moving image overlaid with the UI content on the screen of the display station unit 180 based on the position information of the moving image under the video source again (step S470 ).

In Schritt S470 kann die Inhaltswiedergabesteuereinheit 170 einen Fehler dadurch erfassen, dass sie erkennt, ob der UI-Inhalt zwischen dem Bewegtbild und dem überlagerten UI-Inhalt leer ist oder nicht, und die Wiedergabegröße oder die Position des Bewegtbildes basierend auf dem erfassten Fehler korrigieren.In step S470 can the content playback control unit 170 detect an error by recognizing whether or not the UI content between the moving image and the superimposed UI content is empty, and correct the playback size or the position of the moving image based on the detected error.

5 ist eine beispielhafte Darstellung, die einen Inhalts-Dual-Streaming-Wiedergabebildschirm in der in 1 gezeigten Inhalts-Dual-Streaming-Wiedergabesteuervorrichtung veranschaulicht. 5 FIG. 12 is an explanatory diagram showing a content dual-streaming playback screen in the FIG 1 content dual streaming playback controller shown.

In Bezug auf 5 kann der UI-Inhalt 510 visuell auf dem Bildschirm der Anzeige-Stationseinheit 180 angezeigt werden, und das Bewegtbild 520 kann in Echtzeit in einem vorbestimmten Bereich auf der rechten oberen Seite des Bildschirms wiedergegeben werden.In relation to 5 can the UI content 510 visually on the screen of the display station unit 180 appear and the moving image 520 can be displayed in real time in a predetermined area on the upper right side of the screen.

Bei einer Ausführungsform beseitigt die vorliegende Erfindung den Bewegtbildwiedergabebereich im UI-Inhalt, so dass selbst wenn der UI-Inhalt auf dem in Echtzeit auf dem Bildschirm wiedergegebenen Bewegtbild überlagert wird, das Bewegtbild unter dem UI-Inhalt durch den Bewegtbildwiedergabebereich im UI-Inhalt visuell angezeigt wird.In one embodiment, the present invention eliminates the moving picture display area in the UI content so that even when the UI content is overlaid on the moving picture displayed in real time on the screen, the moving picture under the UI content is visually displayed by the moving picture display area in the UI content becomes.

Bei einer Ausführungsform kann die vorliegende Erfindung den sich nicht ändernden UI-Inhalt nur einmal abrufen und visuell fest auf dem Bildschirm angezeigen lassen, während nur das sich ändernden Bewegtbild separat abgerufen werden kann, so dass der UI-Inhalt in Echtzeit auf dem leeren Teil des Bildschirms des festen UI-Inhalts wiedergegeben werden kann.In one embodiment, the present invention can retrieve the unchanging UI content only once and display it visually on the screen, while only the changing moving image can be retrieved separately, so that the UI content can be viewed in real time on the empty portion of the Fixed UI content screen can be played.

Daher ist es gemäß der vorliegenden Erfindung möglich, den UI-Inhalt mit dem Bewegtbild visuell gleichzeitig wiederzugeben, selbst wenn der UI-Inhalt nicht jedes Mal zum Abrufen des Bewegtbilds empfangen wird, wodurch eine Zeitverzögerung aufgrund einer Kommunikationsüberlastung mit der Cloud-Stationseinheit 160 beseitigt wird, um dem Benutzer eine reibungslose Bereitstellung von Inhalten zu bieten.Therefore, according to the present invention, it is possible to visually display the UI content with the moving picture at the same time even if the UI content is not received every time to retrieve the moving picture, thereby causing a time delay due to communication overload with the cloud station unit 160 is eliminated to provide the user with a smooth delivery of content.

Während die vorliegende Erfindung insbesondere unter Bezugnahme auf beispielhafte Ausführungsformen davon gezeigt und beschrieben wurde, ist sie für den Fachmann so zu verstehen, dass verschiedene Modifikationen und Variationen an der vorliegenden Erfindung vorgenommen werden können, ohne von der Idee der Erfindung und dem Umfang dieser abzuweichen, wie sie in den beigefügten Patentansprüchen definiert sind.While the present invention has been shown and described in particular with reference to exemplary embodiments thereof, it will be understood by those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit and scope of the invention. as defined in the appended claims.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

100:100:
Wiedergabe-Steuervorrichtung für Inhalts-Dual-StreamingPlayback controller for content dual streaming
110:110:
Streaming-StationseinheitStreaming station unit
120:120:
Multimediainhalts-StationseinheitMultimedia Content Station Unit
130:130:
Lizenz-StationseinheitStock Station Unit
140:140:
Transkodierungs-StationseinheitTranscoding station unit
150:150:
Inhaltsanalyse-Engine-EinheitContent analysis engine unit
151:151:
Inhaltsanalyse-EinheitContent analysis unit
153:153:
UI-RekonstruktionseinheitUI reconstruction unit
160:160:
Cloud-StationseinheitCloud-station unit
170:170:
Inhaltswiedergabe-SteuereinheitContents reproduction control unit
171:171:
Bewegtbild-Streaming-EmpfangseinheitMoving image streaming receiver unit
173:173:
Skalen-UmwandlungseinheitScale conversion unit
175:175:
ÜberlagerungseinheitOverlay unit
177:177:
Fehlerkorrektur-EinheitError correction unit
179:179:
Dual-Streaming-WiedergabeeinheitDual streaming playback unit
180:180:
Anzeige-StationseinheitDisplay station unit

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant has been generated automatically and is only included for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

  • KR 1020120095724 [0008, 0011]KR 1020120095724 [0008, 0011]
  • KR 101325025 [0010, 0011]KR 101325025 [0010, 0011]

Claims (8)

Wiedergabe-Steuervorrichtung für Inhalts-Dual-Streaming (100) umfassend: eine Inhaltsanalyse-Engine-Einheit (150), die das Vorhandensein oder Nichtvorhandensein eines Bewegtbildes in einem Multimediainhalt erkennt, einen Wiedergabebereich des Bewegtbildes analysiert und den Multimediainhalt modifiziert, um den UI (User Interface)-Inhalt, dessen Wiedergabebereich ausgeblendet ist, und die Bewegtbild-bezogenene Videoquelle zu erzeugen; eine Cloud-Stationseinheit (160) zum Empfangen des Multimediainhalts zum Zweck eines Lieferns des Multimediainhalts an die Inhaltsanalyse-Engine-Einheit (150) und zum Empfangen des UI-Inhalts und der Videoquelle von der Inhaltsanalyse-Engine-Einheit (150); und eine Inhaltswiedergabe-Steuereinheit (170) zum Empfangen des UI-Inhalts und der Videoquelle und zum direkten Abrufen des Bewegtbildes basierend auf der Videoquelle, um den mit dem Bewegtbild überlagerten UI-Inhalt auf den Bildschirm wiederzugeben.A content control device for dual streaming content (100) comprising: a content analysis engine unit (150) that detects the presence or absence of a moving picture in a multimedia content, analyzes a playback area of the moving picture, and modifies the multimedia content to include the UI (user interface) content whose playback area is hidden and the moving picture - generate related video source; a cloud station unit (160) for receiving the multimedia content for the purpose of delivering the multimedia content to the content analysis engine unit (150) and for receiving the UI content and the video source from the content analysis engine unit (150); and a content playback control unit (170) for receiving the UI content and the video source and directly retrieving the moving image based on the video source to display the UI content overlaid with the moving image on the screen. Wiedergabe-Steuereinheit für Inhalts-Dual-Streaming (100) nach Anspruch 1, die eine Steuerung derart durchführt, dass die in Anspruch 1 beschriebene Inhaltsanalyse-Engine-Einheit (150) den Wiedergabebereich des Bewegtbildes analysiert, wenn das Vorhandensein des Bewegtbildes in dem Multimediainhalt erfasst wird, wobei sie den Bewegtbild-Wiedergabebereich in der UI basierend auf der Analyse entfernt und den UI-Inhalt rekonstruiert.Playback control unit for content dual streaming (100) Claim 1 which performs control such that the in Claim 1 The described content analysis engine unit (150) analyzes the playback area of the moving picture when the presence of the moving picture is detected in the multimedia content, removing the moving picture playback area in the UI based on the analysis and reconstructing the UI content. Wiedergabe-Steuereinheit für Inhalts-Dual-Streaming (100) nach Anspruch 2, die die Videoquelle erzeugen kann, die den aus dem Wiedergabebereich ausgeblendeten UI-Inhalt sowie URL-Link-Informationen zum direkten Abrufen von Daten, wie der Größe und Position des Wiedergabebereichs des ausgeblendeten Bewegtbildes, zusammen mit dem Bewegtbild umfasst, während die in Anspruch 2 beschriebene Inhaltsanalyse-Engine-Einheit (150) den Wiedergabebereich des Bewegtbildes aus dem UI-Inhalt ausblendet.Playback control unit for content dual streaming (100) Claim 2 The video source that can generate the UI content hidden from the playback area, as well as URL link information for directly retrieving data such as the size and position of the playback area of the hidden moving picture, along with the moving picture, while the in Claim 2 described content analysis engine unit (150) hides the playback area of the moving image from the UI content. Wiedergabe-Steuereinheit für Inhalts-Dual-Streaming (100) nach Anspruch 1, welche die Streaming-Daten des Bewegtbildes in Echtzeit an einer Bildschirmposition wiedergibt, die der Position der leeren Stelle von dem UI Inhalt entspricht und mit Hilfe der in der Bewegtbildquelle enthaltenen Bewegtbild-Link-Informationen erhalten wurde, während die in Anspruch 1 beschriebene Inhaltsanalyse-Engine-Einheit (150) die Streaming-Daten des Bewegtbilds unter Verwendung der Bewegtbild-Link-Informationen, die in der von der Cloud-Stationseinheit (160) empfangenen Videoquelle enthalten sind, direkt von der Streaming-Stationseinheit (110) abruft.Playback control unit for content dual streaming (100) Claim 1 , which displays the streaming data of the moving picture in real time at a screen position which corresponds to the position of the empty position of the UI content and was obtained with the aid of the moving picture link information contained in the moving picture source, while the in Claim 1 The content analysis engine unit (150) described above retrieves the streaming data of the moving picture directly from the streaming station unit (110) using the moving picture link information contained in the video source received from the cloud station unit (160) , Wiedergabe-Steuereinheit für Inhalts-Dual-Streaming (100) nach Anspruch 4, welche die Echtzeit-Wiedergabe der konvertierten Streaming-Daten des Bewegtbildes dadurch ermöglicht, dass die in Anspruch 4 beschriebene Inhaltswiedergabe-Steuereinheit (170) die Größe der Streaming-Daten des Bewegtbildes entsprechend der Größe der leeren Stelle des UI-Inhalts unter Verwendung der Größeninformationen des Bewegtbild-Wiedergabebereichs, die in der Bewegtbildquelle enthalten sind, umwandelt.Playback control unit for content dual streaming (100) Claim 4 , which enables the real-time playback of the converted streaming data of the moving image by the fact that in Claim 4 described content reproduction control unit (170) converts the size of the streaming data of the moving picture according to the size of the empty space of the UI content using the size information of the moving picture reproduction area contained in the moving picture source. Wiedergabe-Steuereinheit für Inhalts-Dual-Streaming (100) nach Anspruch 5, welche das Korrigieren dadurch ermöglicht, dass die in Anspruch 5 beschriebene Inhaltswiedergabe-Steuereinheit (170) erfasst, ob eine leere Stelle zwischen dem Bewegtbild und dem überlagerten UI-Inhalt zum Analysieren eines Wiedergabefehlers vorhanden ist und das Korrigieren von mindestens einem unter der Größe, der Position und der Überlagerungsposition des UI-Inhalts durchführt.Playback control unit for content dual streaming (100) Claim 5 , which enables the correction by the fact that in Claim 5 The described content rendering control unit (170) detects whether there is a blank space between the moving image and the superimposed UI content for analyzing a playback error and performs correction of at least one of the size, the position and the superimposing position of the UI content. Wiedergabe-Steuereinheit für Inhalts-Dual-Streaming (100) nach Anspruch 5, welche die Wiedergabe des Bewegtbilds mit der umgewandelten Auflösung dadurch ermöglicht, dass die in Anspruch 5 beschriebene Inhaltswiedergabe-Steuereinheit (170) bei Wiedergabe des Bewegtbilds die Auflösung des Bewegtbildes entsprechend der Bildschirmauflösung umwandelt.Playback control unit for content dual streaming (100) Claim 5 , which enables the reproduction of the moving image with the converted resolution by the fact that the in Claim 5 described content playback control unit (170) converts the resolution of the moving image according to the screen resolution when playing the moving image. Wiedergabe-Steuereinheit für Inhalts-Dual-Streaming (100) nach Anspruch 5, welche entweder die Werbebild-Wiedergabe oder das Bewegtbild einschließlich des Werbebildes dadurch ermöglicht, dass die in Anspruch 5 beschriebene Inhaltswiedergabe-Steuereinheit (170) beim Abrufen von der Streaming-Stationseinheit in Verwendung der in der Bewegtbildquelle enthaltenen Bewegtbild-Link-Informationen, die von der Cloud-Stationseinheit (160) empfangen wurden, entweder direkt das Werbebild empfängt oder das Bewegtbild einschließlich des Werbebildes zur Verfügung stellt.Playback control unit for content dual streaming (100) Claim 5 , which enables either the advertising image reproduction or the moving image including the advertising image by the fact that in Claim 5 described content playback control unit (170) when retrieved from the streaming station unit using the moving image link information contained in the moving image source, which was received by the cloud station unit (160), either directly receives the advertising image or the moving image including the advertising image provides.
DE102019101986.9A 2018-07-30 2019-01-28 Device for playback control for content dual streaming Withdrawn DE102019101986A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2018-0088330 2018-07-30
KR1020180088330A KR20200013310A (en) 2018-07-30 2018-07-30 Apparatus for play control of contents doublr streaming

Publications (1)

Publication Number Publication Date
DE102019101986A1 true DE102019101986A1 (en) 2020-01-30

Family

ID=69148777

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019101986.9A Withdrawn DE102019101986A1 (en) 2018-07-30 2019-01-28 Device for playback control for content dual streaming

Country Status (2)

Country Link
KR (1) KR20200013310A (en)
DE (1) DE102019101986A1 (en)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120095724A (en) 2011-02-21 2012-08-29 주식회사 이노그리드 Method on user environment for setop box connecting broadcasting network base of cloud computing and cloud computing system
KR101325025B1 (en) 2012-11-06 2013-11-04 가온미디어 주식회사 Method of providing cloud service using set-top box, and computer-readable recording medium for the same

Also Published As

Publication number Publication date
KR20200013310A (en) 2020-02-07

Similar Documents

Publication Publication Date Title
DE60013628T2 (en) IDENTIFY ADDITIONAL INFORMATION ASSOCIATED WITH AN AUDIO / VIDEO PROGRAM
DE69901305T3 (en) MODULE MANAGER FOR INTERACTIVE TV SYSTEM
DE60310639T2 (en) CONSISTENT ADAPTATION OF DIGITAL ITEMS IN MPEG-21 MULTIMEDIA SYSTEMS
DE10297520T5 (en) Transform multimedia data for delivery to multiple heterogeneous devices
DE112012000421B4 (en) A reproducing apparatus, a method of controlling the reproducing apparatus, a generating apparatus, a method of controlling the generating apparatus, a recording medium, a data structure, a control program and a recording medium on which the program is stored
DE112017002625T5 (en) PROTECT CONTENT SECTIONS BEFORE MODIFYING OR REMOVING
DE112016001594T5 (en) METHODS, SYSTEMS AND MEDIA FOR GOVERNING AND PRESENTING RELEVANT CONTENTS FOR A PARTICULAR VIDEO GAME
DE112011101003T5 (en) Tile-based media content selection
DE102012224268A1 (en) Hiding Web Videos: A method of displaying videos viewed in multiple windows
DE10120806B4 (en) Device and method for the transmission of multimedia data objects
DE112013007509T5 (en) Method, device and system for selecting audio-video data for streaming
DE112016004560T5 (en) Gateway multi-view video stream processing for second screen content overlay
DE10031034B4 (en) General interactive broadcasts and, in particular, systems for generating interactive broadcasts
EP2701115A1 (en) Method and system for live video consultation
DE102018208496B4 (en) PERSISTENT IDENTIFIER FOR OFFLINE ACCESS TO STREAMING MEDIA
DE112021006157T5 (en) VIDEO CODING USING NON-SALIENCY COMPRESSION FOR LIVE STREAMING OF HIGH-RESOLUTION VIDEO IN A LOW-BANDWIDTH TRANSMISSION
DE102007039479A1 (en) Method and system for the transmission of video programs
DE112015000738B4 (en) Method, computer program product and network for the transmission of a data stream in real time
DE60126944T2 (en) Apparatus and method for displaying information
DE112016001450T5 (en) Video content playback
DE112012002626B4 (en) Systems, methods, and media for controlling a presentation of data images in a video stream
DE102019101986A1 (en) Device for playback control for content dual streaming
DE112020001891B4 (en) Systems and methods of universal video embedding
DE60120745T2 (en) METHOD AND DEVICE FOR COMPILING VIDEO SCENES FROM DIFFERENT DATA
DE112014000242T5 (en) Scalable network-based digital video recordings using a Shard-based architecture

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee