WO2018155910A1 - 중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체 - Google Patents

중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체 Download PDF

Info

Publication number
WO2018155910A1
WO2018155910A1 PCT/KR2018/002146 KR2018002146W WO2018155910A1 WO 2018155910 A1 WO2018155910 A1 WO 2018155910A1 KR 2018002146 W KR2018002146 W KR 2018002146W WO 2018155910 A1 WO2018155910 A1 WO 2018155910A1
Authority
WO
WIPO (PCT)
Prior art keywords
real
time
data
time data
broadcast content
Prior art date
Application number
PCT/KR2018/002146
Other languages
English (en)
French (fr)
Inventor
우승원
박현구
Original Assignee
주식회사 삼십구도씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 삼십구도씨 filed Critical 주식회사 삼십구도씨
Publication of WO2018155910A1 publication Critical patent/WO2018155910A1/ko
Priority to US16/547,361 priority Critical patent/US10805027B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/02—Arrangements for relaying broadcast information
    • H04H20/08—Arrangements for relaying broadcast information among terminal devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/02—Arrangements for generating broadcast information; Arrangements for generating broadcast-related information with a direct linking to broadcast information or to broadcast space-time; Arrangements for simultaneous generation of broadcast information and broadcast-related information
    • H04H60/06—Arrangements for scheduling broadcast services or broadcast-related services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/37—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying segments of broadcast information, e.g. scenes or extracting programme ID
    • H04H60/375—Commercial
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/632—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing using a connection between clients on a wide area network, e.g. setting up a peer-to-peer communication via Internet for retrieving video segments from the hard-disk of other client devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/68—Systems specially adapted for using specific information, e.g. geographical or meteorological information
    • H04H60/73—Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information

Definitions

  • the present invention relates to a method, apparatus and non-transitory computer readable recording medium for supporting relay broadcasting.
  • a general user can generate his or her own video or audio using a camera or a microphone provided in a mobile device such as a smartphone or a tablet
  • a mobile device such as a smartphone or a tablet
  • audio in various forms.
  • the object of the present invention is to solve all the above-mentioned problems.
  • the present invention obtains real-time data including video or audio recorded or recorded in real time by at least one device, obtains non-real-time data including pre-stored video or audio, and edits from a user
  • processed non-real-time data having the same format as that of the real-time data is extracted from the non-real-time data, generating metadata regarding editing of the relay broadcast content including the real-time data and the processed non-real-time data, and relaying
  • real-time data and processing non-real-time data included in broadcast content and metadata regarding editing to another device or an external server
  • real-time video data or real-time audio data recorded or recorded in real time by a user using a mobile device Emitter, as well as to be produced so that the relay broadcast content including the video data to the non-real-time or non-real-time audio data which is previously stored in the mobile device, or store it for other purposes.
  • a method for supporting a broadcast broadcast comprising: acquiring real-time data including video or audio recorded or recorded in real time by at least one device, and including video or audio stored in advance Acquiring non-real-time data to extract processed non-real-time data having the same format as that of the real-time data from the non-real-time data according to an edit input from a user, and extracting the real-time data and the processed non-real-time data.
  • Generating metadata regarding editing of the relay broadcast content and transmitting the real time data and the processed non-real-time data included in the relay broadcast content and the metadata to another device or an external server. This is provided.
  • a device for supporting broadcast broadcasting comprising: real-time data including video or audio captured or recorded in real time by at least one device, and includes video or audio stored in advance
  • a data acquisition unit for acquiring non-real-time data, extracting processed non-real-time data having the same format as that of the real-time data from the non-real-time data according to an editing input from a user, and performing the real-time data and the non-real-time processing
  • a relay broadcast content editing unit for generating metadata regarding editing of the relay broadcast content including the data, and transmitting real-time data and processing non-real-time data and the metadata included in the relay broadcast content to another device or an external server.
  • the device including a broadcast-content transmission is provided.
  • a broadcast content including not only real-time video data or real-time audio data captured or recorded in real time using a mobile device, but also non-real-time video data or audio data pre-stored in a mobile device or storage may be provided. Since it can be produced, the effect which makes it easy for a general user to produce the broadcast content containing the rich and rich content is achieved.
  • the user can include the advertisement content in the real-time relay broadcast content, do not provide a separate tool for restricting the add-on (add-on) of the separate advertising content or insert the advertisement.
  • video platforms e.g., YouTube, Facebook, Instagram, etc.
  • one-user media users can use their live broadcast content The effect of being able to insert freely is achieved.
  • the broadcast content (especially real time data) is reproduced without time delay or interruption in the video platform server.
  • the effect that can be achieved is achieved.
  • the user since it is possible to produce a real-time relay broadcast content without processing a lot of computational resources for video data or audio data, the user wants a real-time relay using a common mobile device and communication network The effect of being able to easily produce broadcast content is achieved.
  • FIG. 1 is a diagram showing the configuration of an entire system for implementing the present invention by way of example.
  • FIG. 2 is a diagram illustrating an internal configuration of a device according to an embodiment of the present invention.
  • FIG. 3 is a diagram exemplarily illustrating a configuration for producing relay broadcast content according to an embodiment of the present invention.
  • FIG. 1 is a diagram showing the configuration of an entire system for implementing the present invention by way of example.
  • the entire system may include a communication network 100, a relay device 200, a photographer device 300, a viewer device 400, and an external server 500. Can be.
  • the communication network 100 may be configured regardless of a communication mode such as wired communication or wireless communication, and includes a local area network (LAN) and a metropolitan area network (MAN). ), And various communication networks such as a wide area network (WAN).
  • the communication network 100 as used herein includes a well-known short range wireless communication network such as Wi-Fi, Wi-Fi Direct, LTE Direct, or Bluetooth. Can be.
  • the communication network 100 may include, at least in part, a known wired / wireless data communication network, a known telephone network, or a known wired / wireless television communication network without being limited thereto.
  • the relay device 200 the real-time data including the video or audio that is recorded or recorded in real time by the at least one photographer device 300 or the relay device 200 Obtains non-real-time data including video or audio that is pre-stored in the relay device 200 or storage (not shown), and in accordance with the edit input from the user, Extracts non-real-time data having the same format, generates metadata about editing of the broadcast content including real-time data and non-real-time data, and generates real-time data and non-real-time data included in the relay broadcast content and Editing metadata about the viewer device 400 or external
  • the user may include real-time video data or real-time audio data captured or recorded in real time using a mobile device, as well as non-real-time video data or non-real-time audio data previously stored in a mobile device or storage.
  • a function for producing a relay broadcast content may be performed.
  • a digital device having a computing capability by mounting a microprocessor such as a smartphone, a tablet, a desktop computer, a notebook computer, a workstation, a PDA, a web pad, a mobile phone, and the like is equipped with a computing power.
  • a microprocessor such as a smartphone, a tablet, a desktop computer, a notebook computer, a workstation, a PDA, a web pad, a mobile phone, and the like is equipped with a computing power.
  • a microprocessor such as a smartphone, a tablet, a desktop computer, a notebook computer, a workstation, a PDA, a web pad, a mobile phone, and the like is equipped with a computing power.
  • the photographer device 300 is a digital device including a function for transmitting the video data or the recorded audio data taken by the photographer to the relay device 200, a smartphone, tablet Any digital device having a computing capability by mounting a microprocessor such as a desktop computer, a notebook computer, a workstation, a PDA, a web pad, a mobile phone, and the like can be adopted as the photographer device 300 according to the present invention. Can be.
  • the viewer device 400 receives video data, audio data, and metadata included in the relay broadcast content transmitted from the relay device 200, and uses the same to broadcast the broadcast content.
  • the relay device 200, the photographer device 400, and the viewer device 400 may include a dedicated application (not shown) that supports the production of the broadcast content.
  • a dedicated application may be downloaded from an external service providing server (not shown).
  • the relay device 200 and the photographer device 300 are described.
  • the viewer device 400 does not necessarily perform each unique function. That is, the mobile device may be any of the relay device 200, the photographer device 300, and the viewer device 400 depending on what purpose it is used for.
  • the mobile device when a user shoots or records using his mobile device, the mobile device may be a photographer device 300, and when the user relays using his mobile device, the mobile device May be the relay device 200, and when the user watches using his mobile device, the mobile device may be the viewer device 400.
  • the mobile device when a user performs video relaying while simultaneously recording video data using his mobile device, the mobile device may be the relay device 200 and the relay device 300 at the same time.
  • the external server 500 receives video data, audio data, and metadata included in the relay broadcast content transmitted from the relay device 200 and uses the same to broadcast the broadcast content.
  • FIG. 2 is a diagram illustrating an internal configuration of the repeater device 200 according to an embodiment of the present invention.
  • the repeater device 200 may include a controller 250.
  • the data obtaining unit 210, the relay broadcasting content editing unit 220, the relay broadcasting content transmitting unit 230, the communication unit 240 and the control unit 250 are relay devices.
  • Program modules in communication with 200 Such program modules may be included in the relay device 200 in the form of operating systems, application modules, and other program modules, and may be physically stored on a variety of known storage devices. In addition, these program modules may be stored in a remote storage device capable of communicating with the relay device 200.
  • such program modules include, but are not limited to, routines, subroutines, programs, objects, components, data structures, etc. that perform particular tasks or execute particular abstract data types, described below, in accordance with the present invention.
  • the data acquisition unit 210 is real-time video data or real-time audio data that is captured or recorded in real time by at least one device (photographer device 300 or repeater device 200) It can perform a function to obtain.
  • the data acquisition unit 210 may perform a function of acquiring non-real-time video data or audio data stored in advance in the relay device 200 or another storage (not shown). Can be.
  • real-time video data or real-time audio data obtained from the photographer device 300 is separately encoded and decoded for editing or relaying in the initial state where the data is generated. It may have a raw data format in which no processing such as decoding or compression is performed.
  • the real-time video data obtained from the photographer device 300 may be composed of a plurality of images containing a still image, these plurality of images is a frame of at least one frame per second (frame) per second Real-time video data can be constructed at a rate.
  • the real time video data may include first real time video data obtained from the first photographer device 300A and second real time video data obtained from the second photographer device 300B.
  • the real time audio data may include first real time audio data obtained from the first photographer device 300A and second real time audio data obtained from the second photographer device 300B.
  • the non-real-time video data or the non-real-time audio data acquired by the relay device 200 may be stored in advance in the relay device 200 or another storage (not shown). Data may be included.
  • the relay broadcast content editing unit 220 may have the same format as the real-time video data or the real-time audio data from the non-real-time video data or the non-real-time audio data according to the editing input from the user. And extracting the non-real-time video data or the non-real-time audio data having a format. For example, when real-time video data consists of a plurality of frames that are bitmap images, processed non-real-time video data may also consist of a plurality of frames that are bitmap images.
  • the relay broadcast content editing unit 220 according to the edit input from the user, at least one of real-time video data, real-time audio data, non-real-time video data and processed non-real-time audio data And generating metadata regarding editing of the relay broadcast content.
  • the processed non-real-time video data or the processed non-real-time audio data may be inserted into the relay broadcast content at a time point or time interval specified by an operation from a user.
  • the metadata regarding editing of the relay broadcast content includes information on switching between real-time video data and raw non-real-time video data, between real-time audio data and raw non-real-time audio data.
  • Information regarding the conversion information about the coupling between at least one of the real time video data and the non-real time video data and at least one of the real time audio data and the non-real time audio data, information on a subtitle, and the like may be included.
  • the metadata regarding editing of the broadcast content may include text-based data having a format such as XML or JSON.
  • the relay broadcast content transmission unit 230 is used to edit real-time video data, real-time audio data, processed non-real-time video data or processed non-real-time audio data included in the relay broadcast content.
  • the metadata may be transmitted to the viewer device 400 or the external server 500.
  • the processed non-real-time video data and the processed non-real-time audio data included in the relay broadcast content may be transmitted to the external server 500 while maintaining the format extracted from the non-real-time video data and the non-real-time audio data. It may be transmitted to the device 400 or the external server 500.
  • the relay when the relay broadcast content is played by the operation server 500 of the video platform that restricts the rights of the relay (that is, the broadcast broadcast content producer) regarding the content playback, the relay leaves the relay device 200 and the video platform. Since it is difficult to control the reproduction state of the real-time data or non-real-time data transmitted to the operation server 500 of the problem, the real-time data is reproduced with time delay in the relay broadcast content in which the real-time data and the non-real-time data should be alternately reproduced. A countermeasure is required to prevent this from happening or the occurrence of breaks between real-time and non-real-time data.
  • the operating server 500 of most video platforms generally streams broadcast broadcast content by sequentially playing data transmitted from the relay device 200.
  • time delays may occur in the real-time data. That is, if the playback of real-time data is interrupted and the playback of the non-real-time data starts in the relay broadcast content, the playback time of the real-time data stops when the playback of the non-real-time data starts.
  • the data is replayed from the stopped playback point (that is, the point at which the non-real-time data is started playing), and the real-time data can only be reproduced with a time delay as long as the non-real-time data is reproduced ( In other words, if the non-real-time data is 30 seconds, the viewer will watch the real-time data captured 30 seconds before all the non-real-time data has been played), as a result, the viewer provides the live broadcast content in real time There will be a problem that will not receive.
  • the relay broadcast content transmitter 230 may play back the real-time data with a time delay when the real-time data and the non-real-time data are played back while being switched with each other in the relay broadcast content.
  • the transmission state of real-time data and non-real-time data can be controlled.
  • the relay broadcast content transmitter 230 may include specific processed non-real-time data in the relay broadcast content for a period from the first time point to the second time point according to an edit input from a user.
  • the real-time data included in the relay broadcast content is not transmitted to the viewer device 400 or the external server 500 for a time from the first time point to the second time point, and the transmission time is stopped.
  • the data may be transmitted to the viewer device 400 or the external server 500 in a state in which the data is delayed by a reproduction time of the specific non-real-time data after the second time point when the reproduction of the characteristic non-real-time data is completed.
  • the relay broadcast content transmitting unit 230 corresponds to a predetermined period every predetermined period during the time from the first time point to the second time point.
  • Each frame may be transmitted to the viewer device 400 or the external server 500 in a time delayed state by a predetermined period.
  • the predetermined period may be set as the time interval between key frames constituting the specific processed non-real-time data.
  • the transmission of the real-time data is stopped and Frames between the first key frame and the second key frame may be transmitted without a time delay, and frames between the second frame and the third frame of the non-real-time data after 1 second from when the transmission of the real-time data is stopped are 1 May be transmitted with a time delayed by a second, and frames between the n + 1 key frame and the n + 2 key frame of the non-real time data are delayed by n seconds n seconds after the transmission of the real-time data is stopped. May be sent in a state.
  • the real-time data when the real-time data is transmitted again after the transmission of the non-real-time data is finished, the real-time data may be transmitted in a time delayed state by the reproduction time of the non-real-time data from the point where the transmission of the real-time data is stopped. .
  • the real-time data included in the relay broadcast content reproduced by the operation server 500 of the video platform that sequentially reproduces data transmitted from the relay device 200 is irrespective of whether the non-real-time data is inserted or not.
  • the real time can be maintained.
  • FIG. 3 is a diagram exemplarily illustrating a configuration for producing relay broadcast content according to an embodiment of the present invention.
  • the relay device 200 receives real-time video data and real-time audio data from the photographer device 300 through a protocol such as Real Time Streaming Protocol (RTSP), Hyper Text Transfer Protocol (HTTP), or the like.
  • Real-time video data and real-time audio data may be recorded and recorded by using a camera and a microphone provided in 200.
  • RTSP Real Time Streaming Protocol
  • HTTP Hyper Text Transfer Protocol
  • the relay device 200 may acquire non-real-time video data and non-real-time audio data stored in advance in a predetermined storage 260 or stored therein according to an editing input from a user. Can be.
  • the repeater may edit the broadcast content including at least some of real time video data, real time audio data, non real time video data, and non real time audio data.
  • the information may be stored as metadata.
  • the relay selects non-real-time video data or non-real-time audio data (for example, advertisement content, etc.) to be included in the relay broadcast content
  • non-real-time video data or non-real-time audio data for example, advertisement content, etc.
  • the above-selected selection is performed within the relay broadcast content.
  • the non-real-time video data or the non-real-time audio data having the same format as that of the real-time video data or the real-time audio data played adjacent to the time interval or time interval at which the non-real-time video data or the non-real-time audio data is inserted is selected. Extraction may be made from non-real-time video data or non-real-time audio data.
  • the relay may edit to generate a black and white effect and display a subtitle "Carryculture”.
  • the relay broadcast content editing unit 220 may obtain time code, which is a reference for editing the broadcast broadcast content, from the photographer device 300. Can be set on the basis of.
  • a time code that is a standard for editing broadcast content includes a photographing device that transmits the latest received data among real-time video data and real-time audio data included in the broadcast content. It may be set based on the synchronized time information obtained from 300.
  • the plurality of photographer devices 300A and 300B which transmit the video data or the audio data to the relay device 200 in real time already have time information synchronized through a mobile communication network or the like, any of the plurality of photographer devices
  • the synchronized time information obtained from one 300A or 300B it is possible to easily set the time code between the real time video data and the real time audio data without having to perform separate synchronization work, and to seamlessly broadcast content in time. Can be generated.
  • the relay broadcast content editing unit 220 receives real-time audio data only from one of the plurality of photographer devices 300A and 300B, the photographer device 300A, and the other photographer device 300B. Only real-time video data can be received from the real-time audio data without receiving real-time audio data, and thus the function of including only the real-time audio data received from one photographer device in the relay broadcast content can be performed. Therefore, according to the present invention, it is possible to save network resources required to receive a plurality of real-time audio data from each of the plurality of photographer devices 300A and 300B, and to produce a plurality of real-time audio contents. This saves the computational resources required to combine the data.
  • the relay device 200 stores a metadata related to editing together with real-time video data, real-time audio data, non-real-time video data, or non-real-time audio data included in the relay broadcast content in a predetermined container.
  • the container 310 may be packaged as a container 310 and transmitted to the viewer device 400 or the external server 500.
  • the non-real-time video data or the non-real-time audio data included in the relay broadcast content, which is transmitted to the external server 500 may be identical to the extracted format (i.e., the format of the real-time video data or the real-time audio data). Format) may be transmitted to the viewer device 400 or the external server 500 while maintaining the format).
  • a viewer device 400 that receives real-time, video data, real-time audio data, processed non-real-time video data or processed non-real-time audio data, and metadata regarding editing included in the relay broadcast content.
  • the external server 500 reproduces real-time, video data, real-time audio data, processed non-real-time video data, or processed non-real-time audio data included in the relay broadcast content with reference to metadata related to editing using the aforementioned dedicated application. Accordingly, the relay broadcast content intended by the relay device 200 may be provided to the viewer.
  • the communication unit 240 allows the relay device 200 to communicate with an external system such as the photographer device 300, the viewer device 400, or the external server 500. Do this.
  • the controller 250 controls the flow of data between the data acquisition unit 210, the relay broadcast content editing unit 220, the relay broadcast content transmission unit 230 and the communication unit 240. Function to control. That is, the controller 250 controls the flow of data to / from the outside or between the respective components of the relay device 200, so that the data acquisition unit 210, the relay broadcast content editing unit 220, the relay broadcast content
  • the transmitter 230 and the communicator 240 control each to perform a unique function.
  • Embodiments according to the present invention described above may be implemented in the form of program instructions that may be executed by various computer components, and may be recorded in a computer-readable recording medium.
  • the computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination.
  • Program instructions recorded on the computer-readable recording medium may be those specially designed and configured for the present invention, or may be known and available to those skilled in the computer software arts.
  • Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROMs, DVDs, and magneto-optical media such as floptical disks. media), and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like.
  • Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.
  • the hardware device may be configured to operate as one or more software modules to perform the process according to the invention, and vice versa.

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 일 태양에 따르면, 중계 방송을 지원하기 위한 방법으로서, 적어도 하나의 디바이스에 의하여 실시간으로 촬영 또는 녹음되는 비디오 또는 오디오를 포함하는 실시간 데이터를 획득하고, 미리 저장되어 있는 비디오 또는 오디오를 포함하는 비실시간 데이터를 획득하는 단계, 사용자로부터의 편집 입력에 따라, 상기 비실시간 데이터로부터 상기 실시간 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 데이터를 추출하고, 상기 실시간 데이터 및 상기 가공 비실시간 데이터를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하는 단계, 및 상기 중계 방송 콘텐츠에 포함되는 실시간 데이터 및 가공 비실시간 데이터와 상기 메타 데이터를 다른 디바이스 또는 외부 서버에게 전송하는 단계를 포함하는 방법이 제공된다.

Description

중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체
본 발명은 중계 방송을 지원하기 위한 방법, 장치 및 비일시성의 컴퓨터 판독 가능한 기록 매체에 관한 것이다.
영상(비디오, video) 신호이나 음향(오디오, audio)신호를 처리하는 데에는 많은 하드웨어 자원(예를 들면, CPU, 메모리 등)이 소요되기 때문에, 여러 채널을 통해 입력되는 복수의 비디오 신호와 오디오 신호를 실시간으로 처리 및 편집하여 중계 방송 신호를 제작하기 위해서는 상당히 높은 사양을 갖춘 고가의 장비가 요구된다. 최근에 방송 통신 기술의 발달됨에 따라 장비의 성능이 높아지고 대중화되기는 했지만, 방송 장비가 처리해야 하는 비디오 신호와 오디오 신호 역시 그 해상도와 품질이 높아졌기 때문에, 높은 사양을 갖춘 고가의 장비를 이용하지 않고서는 복수의 비디오 신호와 오디오 신호를 처리하고 편집하기가 어려운 것은 여전하다.
특히, 일반 사용자는, 스마트폰이나 태블릿과 같은 모바일 디바이스에 구비된 카메라나 마이크를 이용하여 자신만의 비디오나 오디오를 생성할 수 있음에도 불구하고, 모바일 디바이스가 갖는 성능의 한계로 인하여 자신이 생성한 비디오 신호나 오디오 신호를 단순히 업로드하거나 다운로드하는 정도의 처리만을 할 수 있었을 뿐 여러 비디오 신호와 오디오 신호가 결합된 중계 방송 콘텐츠를 제작하는 것은 어려웠으며, 이에 따라 모바일 디바이스를 이용하여 생성할 수 있는 비디오 및 오디오를 다양한 형태로 활용하는 데에 한계를 갖고 있었다.
한편, 최근에는, 개인인 사용자가 자신만의 콘텐츠를 생성하여 중계 방송하는 1인 미디어가 보편화되고, 이러한 1인 미디어에 의하여 제공되는 콘텐츠의 종류도 다양화됨에 따라, 실시간으로 촬영 또는 녹음되는 비디오 데이터 또는 오디오 데이터만으로 구성된 단조로운 콘텐츠를 생성하는 것에서 벗어나 이미 저장되어 있는 광고 콘텐츠와 같은 다양한 비디오 데이터 또는 오디오 데이터까지 포함하는 다채로운 콘텐츠에 제작하고자 하는 사용자의 요구가 증대되고 있는 실정이다.
본 발명은 상술한 문제점을 모두 해결하는 것을 그 목적으로 한다.
또한, 본 발명은 적어도 하나의 디바이스에 의하여 실시간으로 촬영 또는 녹음되는 비디오 또는 오디오를 포함하는 실시간 데이터를 획득하고, 미리 저장되어 있는 비디오 또는 오디오를 포함하는 비실시간 데이터를 획득하고, 사용자로부터의 편집 입력에 따라, 비실시간 데이터로부터 실시간 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 데이터를 추출하고, 실시간 데이터 및 가공 비실시간 데이터를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하고, 중계 방송 콘텐츠에 포함되는 실시간 데이터 및 가공 비실시간 데이터와 편집에 관한 메타 데이터를 다른 디바이스 또는 외부 서버에게 전송함으로써, 사용자가 모바일 디바이스를 이용하여 실시간으로 촬영 또는 녹음되는 실시간 비디오 데이터 또는 실시간 오디오 데이터뿐만 아니라 모바일 디바이스 또는 저장소에 미리 저장되어 있는 비실시간 비디오 데이터 또는 비실시간 오디오 데이터까지 포함하는 중계 방송 콘텐츠를 제작할 수 있도록 하는 것을 다른 목적으로 한다.
상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.
본 발명의 일 태양에 따르면, 중계 방송을 지원하기 위한 방법으로서, 적어도 하나의 디바이스에 의하여 실시간으로 촬영 또는 녹음되는 비디오 또는 오디오를 포함하는 실시간 데이터를 획득하고, 미리 저장되어 있는 비디오 또는 오디오를 포함하는 비실시간 데이터를 획득하는 단계, 사용자로부터의 편집 입력에 따라, 상기 비실시간 데이터로부터 상기 실시간 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 데이터를 추출하고, 상기 실시간 데이터 및 상기 가공 비실시간 데이터를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하는 단계, 및 상기 중계 방송 콘텐츠에 포함되는 실시간 데이터 및 가공 비실시간 데이터와 상기 메타 데이터를 다른 디바이스 또는 외부 서버에게 전송하는 단계를 포함하는 방법이 제공된다.
본 발명의 다른 태양에 따르면, 중계 방송을 지원하기 위한 디바이스로서, 적어도 하나의 디바이스에 의하여 실시간으로 촬영 또는 녹음되는 비디오 또는 오디오를 포함하는 실시간 데이터를 획득하고, 미리 저장되어 있는 비디오 또는 오디오를 포함하는 비실시간 데이터를 획득하는 데이터 획득부, 사용자로부터의 편집 입력에 따라, 상기 비실시간 데이터로부터 상기 실시간 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 데이터를 추출하고, 상기 실시간 데이터 및 상기 가공 비실시간 데이터를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하는 중계 방송 콘텐츠 편집부, 및 상기 중계 방송 콘텐츠에 포함되는 실시간 데이터 및 가공 비실시간 데이터와 상기 메타 데이터를 다른 디바이스 또는 외부 서버에게 전송하는 중계 방송 콘텐츠 전송부를 포함하는 디바이스가 제공된다.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 장치 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하기 위한 컴퓨터 판독 가능한 기록 매체가 더 제공된다.
본 발명에 의하면, 사용자가 모바일 디바이스를 이용하여 실시간으로 촬영 또는 녹음되는 실시간 비디오 데이터 또는 실시간 오디오 데이터뿐만 아니라 모바일 디바이스 또는 저장소에 미리 저장되어 있는 비실시간 비디오 데이터 또는 오디오 데이터까지 포함하는 중계 방송 콘텐츠를 제작할 수 있으므로, 일반 사용자가 다채롭고 풍부한 콘텐츠를 포함하는 중계 방송 콘텐츠를 손쉽게 제작할 수 있게 되는 효과가 달성된다.
또한, 본 발명에 의하면, 사용자가 실시간 중계 방송 콘텐츠 내에 광고 콘텐츠를 포함시킬 수 있으므로, 별도의 광고 콘텐츠를 애드-온(add-on)하는 것을 제한하거나 광고를 삽입하기 위한 별도의 툴을 제공하지 않는 동영상 플랫폼(예를 들면, 유투브(Youtube), 페이스북(Facebook), 인스타그램(Instagram) 등)에서도, 1인 미디어인 사용자가 자신이 제작하는 실시간 중계 방송 콘텐츠에 자신이 원하는 광고 콘텐츠를 자유롭게 삽입할 수 있게 되는 효과가 달성된다.
또한, 본 발명에 의하면, 실시간 데이터를 포함하는 중계 방송 콘텐츠에 비실시간 데이터가 삽입되는 경우에도, 해당 중계 방송 콘텐츠(특히, 실시간 데이터)가 동영상 플랫폼 서버에서 시간 지연이나 끊김이 발생함이 없이 재생될 수 있게 되는 효과가 달성된다.
또한, 본 발명에 의하면, 비디오 데이터 또는 오디오 데이터에 대하여 많은 연산 자원이 소요되는 처리를 하지 않으면서도 실시간 중계 방송 콘텐츠를 제작할 수 있으므로, 사용자가 통상적인 모바일 디바이스와 통신망을 이용하여 자신이 원하는 실시간 중계 방송 콘텐츠를 손쉽게 제작할 수 있게 되는 효과가 달성된다.
도 1은 본 발명을 구현하기 위한 전체 시스템의 구성을 예시적으로 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따라 디바이스의 내부 구성을 예시적으로 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따라 중계 방송 콘텐츠를 제작하는 구성을 예시적으로 나타내는 도면이다.
<부호의 설명>
100: 통신망
200: 중계자 디바이스
210: 데이터 획득부
220: 중계 방송 콘텐츠 편집부
230: 중계 방송 콘텐츠 전송부
240: 통신부
250: 제어부
300: 촬영자 디바이스
300A: 제1 촬영자 디바이스
300B: 제2 촬영자 디바이스
400: 시청자 디바이스
500: 외부 서버
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 속성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.
전체 시스템의 구성
도 1은 본 발명을 구현하기 위한 전체 시스템의 구성을 예시적으로 나타내는 도면이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 전체 시스템은 통신망(100), 중계자 디바이스(200), 촬영자 디바이스(300), 시청자 디바이스(400) 및 외부 서버(500)를 포함할 수 있다.
먼저, 본 발명의 일 실시예에 따른 통신망(100)은 유선 통신이나 무선 통신과 같은 통신 양태를 가리지 않고 구성될 수 있으며, 근거리 통신망(LAN; Local Area Network), 도시권 통신망(MAN; Metropolitan Area Network), 광역 통신망(WAN; Wide Area Network) 등 다양한 통신망으로 구성될 수 있다. 바람직하게는, 본 명세서에서 말하는 통신망(100)은 와이파이(Wi-Fi), 와이파이 다이렉트(Wi-Fi Direct), LTE 다이렉트(LTE Direct), 블루투스(Bluetooth)와 같은 공지의 근거리 무선 통신망을 포함할 수 있다. 그러나, 통신망(100)은, 굳이 이에 국한될 필요 없이, 공지의 유무선 데이터 통신망, 공지의 전화망 또는 공지의 유무선 텔레비전 통신망을 그 적어도 일부에 있어서 포함할 수도 있다.
다음으로, 본 발명의 일 실시예에 따르면, 중계자 디바이스(200)는, 적어도 하나의 촬영자 디바이스(300) 또는 중계자 디바이스(200)에 의하여 실시간으로 촬영 또는 녹음되는 비디오 또는 오디오를 포함하는 실시간 데이터를 획득하고, 중계자 디바이스(200) 또는 저장소(미도시됨)에 미리 저장되어 있는 비디오 또는 오디오를 포함하는 비실시간 데이터를 획득하고, 사용자로부터의 편집 입력에 따라, 비실시간 데이터로부터 실시간 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 데이터를 추출하고, 실시간 데이터 및 가공 비실시간 데이터를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하고, 중계 방송 콘텐츠에 포함되는 실시간 데이터 및 가공 비실시간 데이터와 편집에 관한 메타 데이터를 시청자 디바이스(400) 또는 외부 서버(500)에게 전송함으로써, 사용자가 모바일 디바이스를 이용하여 실시간으로 촬영 또는 녹음되는 실시간 비디오 데이터 또는 실시간 오디오 데이터뿐만 아니라 모바일 디바이스 또는 저장소에 미리 저장되어 있는 비실시간 비디오 데이터 또는 비실시간 오디오 데이터까지 포함하는 중계 방송 콘텐츠를 제작할 수 있도록 하는 기능을 수행할 수 있다.
한편, 본 발명의 일 실시예에 따르면, 스마트폰, 태블릿, 데스크탑 컴퓨터, 노트북 컴퓨터, 워크스테이션, PDA, 웹 패드, 이동 전화기 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기라면 얼마든지 본 발명에 따른 중계자 디바이스(200)로서 채택될 수 있다.
본 발명에 따른 중계자 디바이스(200)의 구성과 기능에 관하여는 이하의 상세한 설명을 통하여 자세하게 알아보기로 한다.
다음으로, 본 발명의 일 실시예에 따르면, 촬영자 디바이스(300)는 촬영자가 촬영한 비디오 데이터 또는 녹음한 오디오 데이터를 중계자 디바이스(200)에게 전송하는 기능을 포함하는 디지털 기기로서, 스마트폰, 태블릿, 데스크탑 컴퓨터, 노트북 컴퓨터, 워크스테이션, PDA, 웹 패드, 이동 전화기 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기라면 얼마든지 본 발명에 따른 촬영자 디바이스(300)로서 채택될 수 있다.
다음으로, 본 발명의 일 실시예에 따르면, 시청자 디바이스(400)는 중계자 디바이스(200)로부터 전송되는 중계 방송 콘텐츠에 포함된 비디오 데이터, 오디오 데이터 및 메타 데이터를 수신하고 이를 이용하여 중계 방송 콘텐츠를 재생하는 기능을 포함하는 디지털 기기로서, 스마트폰, 태블릿, 데스크탑 컴퓨터, 노트북 컴퓨터, 워크스테이션, PDA, 웹 패드, 이동 전화기 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기라면 얼마든지 본 발명에 따른 시청자 디바이스(400)로서 채택될 수 있다.
특히, 본 발명의 일 실시예에 따르면, 중계자 디바이스(200), 촬영자 디바이스(400) 및 시청자 디바이스(400)는 중계 방송 콘텐츠를 제작할 수 있도록 지원하는 전용 애플리케이션(미도시됨)을 포함할 수 있다. 이와 같은 애플리케이션은 외부의 서비스 제공 서버(미도시됨)로부터 다운로드된 것일 수 있다.
한편, 본 명세서에는 중계자 디바이스(200), 촬영자 디바이스(300) 및 시청자 디바이스(400)가 각각 수행할 수 있는 고유한 기능에 대하여 중점적으로 설명되어 있지만, 중계자 디바이스(200), 촬영자 디바이스(300) 및 시청자 디바이스(400)가 반드시 각각의 고유한 기능만을 수행하는 것은 아님을 밝혀 둔다. 즉, 모바일 디바이스는 그것이 어떤 용도로 이용되느냐에 따라 중계자 디바이스(200), 촬영자 디바이스(300) 및 시청자 디바이스(400) 중 어느 것이라도 될 수 있다.
예를 들면, 사용자가 자신의 모바일 디바이스를 이용하여 촬영하거나 녹음하는 경우에 해당 모바일 디바이스는 촬영자 디바이스(300)가 될 수 있고, 사용자가 자신의 모바일 디바이스를 이용하여 중계를 하는 경우에 해당 모바일 디바이스는 중계자 디바이스(200)가 될 수 있으며, 사용자가 자신의 모바일 디바이스를 이용하여 시청을 하는 경우에 해당 모바일 디바이스는 시청자 디바이스(400)가 될 수 있다.
다른 예를 들면, 사용자가 자신의 모바일 디바이스를 이용하여 비디오 데이터를 촬영하는 동시에 중계를 수행하는 경우에 해당 모바일 디바이스는 중계자 디바이스(200)이면서 동시에 중계자 디바이스(300)가 될 수 있다.
한편, 본 발명의 일 실시예에 따르면, 외부 서버(500)는, 중계자 디바이스(200)로부터 전송되는 중계 방송 콘텐츠에 포함된 비디오 데이터, 오디오 데이터 및 메타 데이터를 수신하고 이를 이용하여 중계 방송 콘텐츠를 적어도 하나의 다른 시청자 디바이스(미도시됨)에게 제공(즉, 스트리밍)하는 기능을 수행하는 서버로서, 예를 들면, 동영상 또는 중계 방송을 제공하는 플랫폼(예를 들면, 유투브(Youtube), 페이스북(Facebook), 인스타그램(Instagram) 등)의 운영 서버일 수 있다.
중계자 디바이스의 구성
이하에서는, 본 발명의 구현을 위하여 중요한 기능을 수행하는 중계자 디바이스(200)의 내부 구성 및 각 구성요소의 기능에 대하여 살펴보기로 한다.
도 2는 본 발명의 일 실시예에 따라 중계자 디바이스(200)의 내부 구성을 예시적으로 나타내는 도면이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 중계자 디바이스(200)는, 데이터 획득부(210), 중계 방송 콘텐츠 편집부(220), 중계 방송 콘텐츠 전송부(230), 통신부(240) 및 제어부(250)를 포함할 수 있다. 본 발명의 일 실시예에 따르면, 데이터 획득부(210), 중계 방송 콘텐츠 편집부(220), 중계 방송 콘텐츠 전송부(230), 통신부(240) 및 제어부(250)는 그 중 적어도 일부가 중계자 디바이스(200)와 통신하는 프로그램 모듈들일 수 있다. 이러한 프로그램 모듈들은 운영 시스템, 응용 프로그램 모듈 및 기타 프로그램 모듈의 형태로 중계자 디바이스(200)에 포함될 수 있으며, 물리적으로는 여러 가지 공지의 기억 장치 상에 저장될 수 있다. 또한, 이러한 프로그램 모듈들은 중계자 디바이스(200)와 통신 가능한 원격 기억 장치에 저장될 수도 있다. 한편, 이러한 프로그램 모듈들은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.
먼저, 본 발명의 일 실시예에 따르면, 데이터 획득부(210)는 적어도 하나의 디바이스(촬영자 디바이스(300) 또는 중계자 디바이스(200))에 의하여 실시간으로 촬영 또는 녹음되는 실시간 비디오 데이터 또는 실시간 오디오 데이터를 획득하는 기능을 수행할 수 있다.
또한, 본 발명의 일 실시예에 따르면, 데이터 획득부(210)는 중계자 디바이스(200) 또는 다른 저장소(미도시됨)에 미리 저장되어 있는 비실시간 비디오 데이터 또는 오디오 데이터를 획득하는 기능을 수행할 수 있다.
구체적으로, 본 발명의 일 실시예에 따르면, 촬영자 디바이스(300)로부터 획득되는 실시간 비디오 데이터 또는 실시간 오디오 데이터는 해당 데이터가 생성된 최초의 상태에서 편집이나 중계를 위해 따로 인코딩(encoding), 디코딩(decoding), 압축 등의 처리가 행해지지 않은 로우 데이터(raw data) 형식을 가질 수 있다. 또한, 본 발명의 일 실시예에 따르면, 촬영자 디바이스(300)로부터 획득되는 실시간 비디오 데이터는 정지 영상을 담고 있는 복수의 이미지로 구성될 수 있으며, 이들 복수의 이미지는 초당 1 프레임(frame) 이상의 프레임 레이트(rate)로 실시간 비디오 데이터를 구성할 수 있다.
한편, 본 발명의 일 실시예에 따르면, 중계자 디바이스(200)에게 제공되는 실시간 비디오 데이터 또는 실시간 오디오 데이터를 촬영 또는 녹음하는 촬영자 디바이스(300)는 둘 이상일 수 있다. 구체적으로, 본 발명의 일 실시예에 따르면, 실시간 비디오 데이터에는 제1 촬영자 디바이스(300A)로부터 획득되는 제1 실시간 비디오 데이터와 제2 촬영자 디바이스(300B)로부터 획득되는 제2 실시간 비디오 데이터가 포함될 수 있고, 실시간 오디오 데이터에는 제1 촬영자 디바이스(300A)로부터 획득되는 제1 실시간 오디오 데이터와 제2 촬영자 디바이스(300B)로부터 획득되는 제2 실시간 오디오 데이터가 포함될 수 있다.
또한, 본 발명의 일 실시예에 따르면, 중계자 디바이스(200)가 획득하는 비실시간 비디오 데이터 또는 비실시간 오디오 데이터에는, 중계자 디바이스(200) 또는 다른 저장소(미도시됨)에 미리 저장되어 있는 광고 콘텐츠 데이터가 포함될 수 있다.
다음으로, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 편집부(220)는, 사용자로부터의 편집 입력에 따라, 비실시간 비디오 데이터 또는 비실시간 오디오 데이터로부터 실시간 비디오 데이터 또는 실시간 오디오 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터를 추출하는 기능을 수행할 수 있다. 예를 들면, 실시간 비디오 데이터가 비트맵 이미지인 복수의 프레임으로 구성되는 경우에, 가공 비실시간 비디오 데이터 역시 비트맵(bitmap) 이미지인 복수의 프레임으로 구성될 수 있다.
또한, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 편집부(220)는, 사용자로부터의 편집 입력에 따라, 실시간 비디오 데이터, 실시간 오디오 데이터, 가공 비실시간 비디오 데이터 및 가공 비실시간 오디오 데이터 중 적어도 하나를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하는 기능을 수행할 수 있다.
구체적으로, 본 발명의 일 실시예에 따르면, 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터는, 사용자로부터의 조작에 의해 특정되는 시점 또는 시간 구간에 중계 방송 콘텐츠 내에 삽입될 수 있다.
또한, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터에는, 실시간 비디오 데이터 및 가공 비실시간 비디오 데이터 사이의 전환에 관한 정보, 실시간 오디오 데이터 및 가공 비실시간 오디오 데이터 사이의 전환에 관한 정보, 실시간 비디오 데이터 및 가공 비실시간 비디오 데이터 중 적어도 하나와 실시간 오디오 데이터 및 가공 비실시간 오디오 데이터 중 적어도 하나 사이의 결합에 관한 정보, 자막에 관한 정보 등이 포함될 수 있다. 예를 들면, 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터에는 XML, JSON 등의 형식을 갖는 텍스트 기반의 데이터가 포함될 수 있다.
다음으로, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 전송부(230)는, 중계 방송 콘텐츠에 포함되는 실시간 비디오 데이터, 실시간 오디오 데이터, 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터와 편집에 관한 메타 데이터를 시청자 디바이스(400) 또는 외부 서버(500)에게 전송하는 기능을 수행할 수 있다.
구체적으로, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠에 포함되는 실시간 비디오 데이터 및 실시간 오디오 데이터는 촬영자 디바이스(300)로부터 수신된 로우 데이터(raw data) 상태를 유지한 채 시청자 디바이스(400) 또는 외부 서버(500)에게 전송될 수 있고, 중계 방송 콘텐츠에 포함되는 가공 비실시간 비디오 데이터 및 가공 비실시간 오디오 데이터는 위의 비실시간 비디오 데이터 및 비실시간 오디오 데이터로부터 추출된 형식을 유지한 채 시청자 디바이스(400) 또는 외부 서버(500)에게 전송될 수 있다.
한편, 콘텐츠 재생에 관한 중계자(즉, 중계 방송 콘텐츠 제작자)의 권한을 제한하는 동영상 플랫폼의 운영 서버(500)에 의하여 중계 방송 콘텐츠가 재생되는 경우에는, 중계자가 중계자 디바이스(200)를 떠나 동영상 플랫폼의 운영 서버(500)에게 전송된 실시간 데이터 또는 비실시간 데이터의 재생 상태를 제어하기 어려우므로, 실시간 데이터와 비실시간 데이터가 서로 번갈아 재생되어야 하는 중계 방송 콘텐츠 내에서 실시간 데이터가 시간 지연되어 재생되는 문제점이 발생하거나 또는 실시간 데이터와 비실시간 데이터 사이에 끊김 현상이 발생하는 것이 방지하기 위한 대책이 요구된다.
예를 들면, 대부분의 동영상 플랫폼의 운영 서버(500)는 중계자 디바이스(200)로부터 전송되는 데이터를 순차적으로 재생하는 방식으로 중계 방송 콘텐츠를 스트리밍하는 것이 일반적인데, 중계 방송 콘텐츠 내에서 실시간 데이터와 비실시간 데이터가 서로 번갈아 가면서 재생되는 경우에는 실시간 데이터에서 시간 지연이 발생할 수 있다. 즉, 중계 방송 콘텐츠 내에서 실시간 데이터의 재생이 중단되고 비실시간 데이터의 재생이 시작되면 실시간 데이터의 재생 시점은 비실시간 데이터의 재생이 시작된 시점에 멈춰 있게 되고, 비실시간 데이터의 재생이 종료되면 실시간 데이터는 위의 멈춰 있던 재생 시점(즉, 비실시간 데이터의 재생이 시작된 시점)부터 다시 재생되게 되는데, 이렇게 되면 실시간 데이터는 비실시간 데이터가 재생된 시간만큼 시간 지연이 된 상태로 재생될 수밖에 없으며(즉, 비실시간 데이터가 재생된 시간이 30초라면, 시청자는 비실시간 데이터가 모두 재생된 다음에 30초 전에 촬영된 실시간 데이터를 시청하게 됨), 결과적으로, 시청자는 중계 방송 콘텐츠를 실시간으로 제공받지 못하게 되는 문제가 발생하게 된다.
이와 관련하여, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 전송부(230)는, 중계 방송 콘텐츠 내에서 실시간 데이터와 비실시간 데이터가 서로 전환되면서 재생되는 경우에 실시간 데이터가 시간 지연되어 재생되거나 끊겨서 재생되는 것을 방지하기 위하여, 실시간 데이터 및 비실시간 데이터의 전송 상태를 제어할 수 있다.
구체적으로, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 전송부(230)는, 사용자로부터의 편집 입력에 따라 제1 시점부터 제2 시점까지의 시간 동안 중계 방송 콘텐츠 내에 특정 가공 비실시간 데이터가 삽입되는 경우에, 중계 방송 콘텐츠 내에 포함되어 전송되고 있던 실시간 데이터가 제1 시점부터 제2 시점까지의 시간 동안 시청자 디바이스(400) 또는 외부 서버(500)에게 전송되지 않도록 하고, 전송이 중단되었던 실시간 데이터가 특징 비실시간 데이터의 재생이 완료된 제2 시점 이후에 특정 비실시간 데이터의 재생 시간만큼 시간 지연된 상태로 시청자 디바이스(400) 또는 외부 서버(500)에게 전송되도록 하는 기능을 수행할 수 있다.
또한, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 전송부(230)는, 위의 특정 가공 비실시간 데이터가, 제1 시점부터 제2 시점까지의 시간 동안에 소정의 주기마다 소정의 주기에 해당하는 프레임들을 단위로 하여 소정의 주기만큼 시간 지연(delay)된 상태로 시청자 디바이스(400) 또는 외부 서버(500)에게 전송되도록 하는 기능을 수행할 수 있다.
여기서, 본 발명의 일 실시예에 따르면, 위의 소정의 주기는 특정 가공 비실시간 데이터를 구성하는 키(key) 프레임 사이의 시간 간격으로서 설정될 수 있다.
예를 들면, 중계 방송 콘텐츠 내에서 실시간 데이터가 전송되고 있는 상황에서 키 프레임 사이의 시간 간격이 1초인 가공 비실시간 데이터가 삽입되는 경우에, 실시간 데이터의 전송이 중단되는 것과 함께 가공 비실시간 데이터의 제1 키 프레임과 제2 키 프레임 사이의 프레임들이 시간 지연 없이 전송될 수 있고, 실시간 데이터의 전송이 중단된 시점으로부터 1초 후에 가공 비실시간 데이터의 제2 프레임과 제3 프레임 사이의 프레임들은 1초만큼 시간 지연된 상태로 전송될 수 있고, 실시간 데이터의 전송이 중단된 시점으로부터 n초 후에 가공 비실시간 데이터의 제n+1 키 프레임과 제n+2 키 프레임 사이의 프레임들은 n초만큼 시간 지연된 상태로 전송될 수 있다. 또한, 위의 예에서, 비실시간 데이터의 전송이 끝나고 실시간 데이터가 다시 전송되는 때에는, 실시간 데이터가 실시간 데이터의 전송이 중단된 시점으로부터 비실시간 데이터의 재생 시간만큼 시간 지연된 상태로 전송될 수 있게 된다. 이렇게 함으로써, 중계자 디바이스(200)로부터 전송되는 데이터를 순차적으로 재생하는 동영상 플랫폼의 운영 서버(500)에 의하여 재생되는 중계 방송 콘텐츠에 포함되는 실시간 데이터는 비실시간 데이터의 삽입 여부 또는 재생 시간과 관계 없이 그 실시간성을 유지할 수 있게 된다.
도 3은 본 발명의 일 실시예에 따라 중계 방송 콘텐츠를 제작하는 구성을 예시적으로 나타내는 도면이다.
도 3을 참조하면, 중계자 디바이스(200)는 RTSP(Real Time Streaming Protocol), HTTP(Hyper Text Transfer Protocol) 등의 프로토콜을 통하여 촬영자 디바이스(300)로부터 실시간 비디오 데이터 및 실시간 오디오 데이터를 수신하거나 중계자 디바이스(200) 내에 구비된 카메라 및 마이크를 이용하여 실시간 비디오 데이터 및 실시간 오디오 데이터를 각각 촬영 및 녹음할 수 있다.
계속하여, 도 3을 참조하면, 중계자 디바이스(200)는 소정의 저장소(260)에 미리 저장되어 있거나 자신이 저장하고 있는 비실시간 비디오 데이터 및 비실시간 오디오 데이터를 사용자로부터의 편집 입력에 따라 획득할 수 있다.
다음으로, 도 3을 참조하면, 중계자는 실시간 비디오 데이터, 실시간 오디오 데이터, 비실시간 비디오 데이터 및 비실시간 오디오 데이터 중 적어도 일부를 포함하는 중계 방송 콘텐츠에 대한 편집을 수행할 수 있으며, 위의 편집에 관한 정보는 메타 데이터로서 저장될 수 있다.
구체적으로, 본 발명의 일 실시예에 따르면, 중계자가 중계 방송 콘텐츠에 포함시킬 비실시간 비디오 데이터 또는 비실시간 오디오 데이터(예를 들면, 광고 콘텐츠 등)를 선택하면, 중계 방송 콘텐츠 내에서 위의 선택된 비실시간 비디오 데이터 또는 비실시간 오디오 데이터가 삽입될 시점 또는 시간 구간에 인접하여 재생되는 실시간 비디오 데이터 또는 실시간 오디오 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터를 위의 선택된 비실시간 비디오 데이터 또는 비실시간 오디오 데이터로부터 추출할 수 있다.
또한, 본 발명의 일 실시예에 따르면, 중계자는 흑백 효과를 발생시키고 "Carryculture"라는 자막을 표시하라는 취지의 편집을 수행할 수 있다.
한편, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 편집부(220)는 중계 방송 콘텐츠에 대한 편집의 기준이 되는 타임 코드(time code)를 촬영자 디바이스(300)로부터 획득할 수 있는 동기화된 시간 정보를 기준으로 하여 설정할 수 있다. 구체적으로, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠에 대한 편집의 기준이 되는 타임 코드는 중계 방송 콘텐츠에 포함되는 실시간 비디오 데이터 및 실시간 오디오 데이터 중 가장 늦게 수신된 데이터를 전송한 촬영자 디바이스(300)로부터 획득되는 동기화된 시간 정보를 기준으로 하여 설정될 수 있다. 본 발명에서 중계자 디바이스(200)에게 비디오 데이터 또는 오디오 데이터를 실시간으로 전송하는 복수의 촬영자 디바이스(300A, 300B)는 이미 이동 통신망 등을 통해 동기화된 시간 정보를 갖고 있기 때문에, 복수의 촬영자 디바이스 중 어느 하나(300A, 300B)로부터 획득되는 동기화된 시간 정보를 활용하면 별개의 동기화 작업을 수행할 필요 없이 실시간 비디오 데이터 및 실시간 오디오 데이터 사이의 타임 코드를 손쉽게 설정하고 시간적으로 끊김 없는(seamless) 중계 방송 콘텐츠를 생성할 수 있게 된다.
또한, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠 편집부(220)는 복수의 촬영자 디바이스(300A, 300B) 중 어느 한 촬영자 디바이스(300A)로부터만 실시간 오디오 데이터를 수신하고 나머지 촬영자 디바이스(300B)로부터는 실시간 오디오 데이터를 수신함이 없이 실시간 비디오 데이터만을 수신할 수 있으며, 이와 같이 한 촬영자 디바이스로부터 수신된 실시간 오디오 데이터만을 중계 방송 콘텐츠에 포함시키는 기능을 수행할 수 있다. 따라서, 본 발명에 의하면, 복수의 촬영자 디바이스(300A, 300B) 각각으로부터 복수의 실시간 오디오 데이터를 수신하는 데에 소요되는 네트워크 자원을 절약할 수 있게 되고, 중계 방송 콘텐츠를 제작함에 있어서 복수의 실시간 오디오 데이터를 결합하는 데에 소요되는 연산 자원을 절약할 수 있게 된다.
다음으로, 도 3을 참조하면, 중계자 디바이스(200)는 중계 방송 콘텐츠에 포함되는 실시간 비디오 데이터, 실시간 오디오 데이터, 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터과 함께 편집에 관한 메타 데이터를 소정의 컨테이너(container)(310)로 패키징하여 시청자 디바이스(400) 또는 외부 서버(500)에게 전송할 수 있다. 구체적으로, 본 발명의 일 실시예에 따르면, 중계 방송 콘텐츠에 포함되는 실시간 비디오 데이터 또는 실시간 오디오 데이터는 촬영자 디바이스(300)로부터 수신된 로우 데이터(raw data) 상태를 그대로 유지한 채 시청자 디바이스(400) 또는 외부 서버(500)에게 전송될 수 있고, 중계 방송 콘텐츠에 포함되는 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터는 위의 추출된 형식(즉, 실시간 비디오 데이터 또는 실시간 오디오 데이터의 형식과 동일한 형식)을 그대로 유지한 채 시청자 디바이스(400) 또는 외부 서버(500)에게 전송될 수 있다.
다음으로, 도 3을 참조하면, 중계 방송 콘텐츠에 포함되는 실시간, 비디오 데이터, 실시간 오디오 데이터, 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터와 편집에 관한 메타 데이터를 전송 받은 시청자 디바이스(400) 또는 외부 서버(500)는 앞서 언급된 전용 애플리케이션을 이용하여 중계 방송 콘텐츠에 포함되는 실시간, 비디오 데이터, 실시간 오디오 데이터, 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터를 편집에 관한 메타 데이터를 참조하여 재생할 수 있으며, 이에 따라 중계자 디바이스(200)에 의하여 의도된 중계 방송 콘텐츠가 시청자에게 제공될 수 있게 된다.
한편, 본 발명의 일 실시예에 따르면, 통신부(240)는 중계자 디바이스(200)가 촬영자 디바이스(300), 시청자 디바이스(400) 또는 외부 서버(500)와 같은 외부 시스템과 통신할 수 있도록 하는 기능을 수행한다.
마지막으로, 본 발명의 일 실시예에 따르면, 제어부(250)는 데이터 획득부(210), 중계 방송 콘텐츠 편집부(220), 중계 방송 콘텐츠 전송부(230) 및 통신부(240) 간의 데이터의 흐름을 제어하는 기능을 수행한다. 즉, 제어부(250)는 외부로의/외부로부터의 또는 중계자 디바이스(200)의 각 구성요소 간의 데이터의 흐름을 제어함으로써, 데이터 획득부(210), 중계 방송 콘텐츠 편집부(220), 중계 방송 콘텐츠 전송부(230) 및 통신부(240)에서 각각 고유 기능을 수행하도록 제어한다.
이상 설명된 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형을 꾀할 수 있다.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.

Claims (10)

  1. 중계 방송을 지원하기 위한 방법으로서,
    적어도 하나의 디바이스에 의하여 실시간으로 촬영 또는 녹음되는 비디오 또는 오디오를 포함하는 실시간 데이터를 획득하고, 미리 저장되어 있는 비디오 또는 오디오를 포함하는 비실시간 데이터를 획득하는 단계,
    사용자로부터의 편집 입력에 따라, 상기 비실시간 데이터로부터 상기 실시간 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 데이터를 추출하고, 상기 실시간 데이터 및 상기 가공 비실시간 데이터를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하는 단계, 및
    상기 중계 방송 콘텐츠에 포함되는 실시간 데이터 및 가공 비실시간 데이터와 상기 메타 데이터를 다른 디바이스 또는 외부 서버에게 전송하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 중계 방송 콘텐츠에 포함되는 실시간 비디오 데이터 및 실시간 오디오 데이터는 상기 적어도 하나의 디바이스로부터 수신된 로우 데이터(raw data) 상태를 유지한 채 상기 다른 디바이스 또는 상기 외부 서버에게 전송되고, 상기 중계 방송 콘텐츠에 포함되는 가공 비실시간 비디오 데이터 및 가공 비실시간 오디오 데이터는 상기 추출된 형식을 유지한 채 상기 다른 디바이스 또는 상기 외부 서버에게 전송되는 방법.
  3. 제1항에 있어서,
    상기 편집 입력에 따라 제1 시점부터 제2 시점까지의 시간 동안 상기 중계 방송 콘텐츠 내에 특정 가공 비실시간 데이터가 삽입되는 경우에, 상기 중계 방송 콘텐츠 내에 포함되어 전송되고 있던 실시간 데이터는, 제1 시점부터 제2 시점까지의 시간 동안 상기 다른 디바이스 또는 상기 외부 서버에게 전송되지 않고, 상기 제2 시점 이후에 상기 특정 비실시간 데이터의 재생 시간만큼 시간 지연된 상태로 상기 다른 디바이스 또는 상기 외부 서버에게 전송되는 방법.
  4. 제3항에 있어서,
    상기 특정 가공 비실시간 데이터는, 상기 제1 시점부터 상기 제2 시점까지의 시간 동안에 소정의 주기마다 상기 소정의 주기에 해당하는 복수의 프레임을 단위로 하여 상기 소정의 주기만큼 시간 지연(delay)된 상태로 상기 다른 디바이스 또는 상기 외부 서버에게 전송되는 방법.
  5. 제4항에 있어서,
    상기 소정의 주기는 상기 특정 가공 비실시간 데이터를 구성하는 키(key) 프레임 사이의 시간 간격에 기초하여 설정되는 방법.
  6. 제1항에 있어서,
    상기 비실시간 데이터에는, 미리 저장되어 있거나 광고주 서버로부터 획득되는 광고 콘텐츠 데이터가 포함되는 방법.
  7. 제1항에 있어서,
    상기 실시간 데이터에는, 제1 디바이스로부터 획득되는 제1 실시간 데이터와 제2 디바이스로부터 획득되는 제2 실시간 데이터가 포함되는 방법.
  8. 제1항에 있어서,
    상기 메타 데이터에는, 상기 실시간 비디오 데이터 또는 상기 오디오 데이터와 상기 가공 비실시간 비디오 데이터 또는 가공 비실시간 오디오 데이터 사이의 전환에 관한 정보, 상기 실시간 비디오 데이터 또는 상기 비실시간 비디오 데이터와 상기 실시간 오디오 데이터 또는 상기 가공 비실시간 오디오 데이터 사이의 결합에 관한 정보 중 적어도 하나가 포함되는 방법.
  9. 제1항에 따른 방법을 실행하기 위한 비일시성의 컴퓨터 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
  10. 중계 방송을 지원하기 위한 디바이스로서,
    적어도 하나의 디바이스에 의하여 실시간으로 촬영 또는 녹음되는 비디오 또는 오디오를 포함하는 실시간 데이터를 획득하고, 미리 저장되어 있는 비디오 또는 오디오를 포함하는 비실시간 데이터를 획득하는 데이터 획득부,
    사용자로부터의 편집 입력에 따라, 상기 비실시간 데이터로부터 상기 실시간 데이터의 형식과 동일한 형식을 갖는 가공 비실시간 데이터를 추출하고, 상기 실시간 데이터 및 상기 가공 비실시간 데이터를 포함하는 중계 방송 콘텐츠에 대한 편집에 관한 메타 데이터를 생성하는 중계 방송 콘텐츠 편집부, 및
    상기 중계 방송 콘텐츠에 포함되는 실시간 데이터 및 가공 비실시간 데이터와 상기 메타 데이터를 다른 디바이스 또는 외부 서버에게 전송하는 중계 방송 콘텐츠 전송부
    를 포함하는 디바이스.
PCT/KR2018/002146 2017-02-21 2018-02-21 중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체 WO2018155910A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/547,361 US10805027B2 (en) 2017-02-21 2019-08-21 Method, device, and non-transitory computer-readable recording medium for supporting relay broadcast

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170023080A KR101906396B1 (ko) 2017-02-21 2017-02-21 중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR10-2017-0023080 2017-02-21

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/547,361 Continuation US10805027B2 (en) 2017-02-21 2019-08-21 Method, device, and non-transitory computer-readable recording medium for supporting relay broadcast

Publications (1)

Publication Number Publication Date
WO2018155910A1 true WO2018155910A1 (ko) 2018-08-30

Family

ID=63253742

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/002146 WO2018155910A1 (ko) 2017-02-21 2018-02-21 중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체

Country Status (3)

Country Link
US (1) US10805027B2 (ko)
KR (1) KR101906396B1 (ko)
WO (1) WO2018155910A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102622082B1 (ko) 2018-11-19 2024-01-09 삼성전자주식회사 디스플레이 장치, 서버, 전자 장치 및 그 제어 방법들

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040004678A (ko) * 2001-06-01 2004-01-13 제너럴 인스트루먼트 코포레이션 디지털 비디오 전송 스트림의 스플라이싱
KR20110129559A (ko) * 2010-05-26 2011-12-02 주식회사 마루이엔지 디지털 광고 삽입기를 위한 비동기 직렬 인터페이스 스위쳐
KR101107865B1 (ko) * 2006-05-25 2012-02-08 콸콤 인코포레이티드 방송 시스템에서 타겟 광고
KR101406243B1 (ko) * 2013-02-05 2014-06-13 중앙대학교 산학협력단 스트리밍 서비스 시스템 및 그 방법
KR101604002B1 (ko) * 2014-10-01 2016-03-16 우승원 모바일 단말 장치를 이용한 중계 방송을 지원하기 위한 방법, 장치 및 비일시성의 컴퓨터 판독 가능한 기록 매체

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8959555B2 (en) * 2012-07-03 2015-02-17 Lawrence Maxwell Monari Instrumented sports paraphernalia system
KR101670942B1 (ko) 2015-11-19 2016-10-31 주식회사 삼십구도씨 모바일 디바이스를 이용한 중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040004678A (ko) * 2001-06-01 2004-01-13 제너럴 인스트루먼트 코포레이션 디지털 비디오 전송 스트림의 스플라이싱
KR101107865B1 (ko) * 2006-05-25 2012-02-08 콸콤 인코포레이티드 방송 시스템에서 타겟 광고
KR20110129559A (ko) * 2010-05-26 2011-12-02 주식회사 마루이엔지 디지털 광고 삽입기를 위한 비동기 직렬 인터페이스 스위쳐
KR101406243B1 (ko) * 2013-02-05 2014-06-13 중앙대학교 산학협력단 스트리밍 서비스 시스템 및 그 방법
KR101604002B1 (ko) * 2014-10-01 2016-03-16 우승원 모바일 단말 장치를 이용한 중계 방송을 지원하기 위한 방법, 장치 및 비일시성의 컴퓨터 판독 가능한 기록 매체

Also Published As

Publication number Publication date
US10805027B2 (en) 2020-10-13
KR20180096399A (ko) 2018-08-29
KR101906396B1 (ko) 2018-10-10
US20190379472A1 (en) 2019-12-12

Similar Documents

Publication Publication Date Title
WO2019205872A1 (zh) 视频流处理方法、装置、计算机设备及存储介质
WO2013077525A1 (ko) 제어 방법 및 그를 이용한 장치
WO2013077524A1 (ko) 사용자 인터페이스 표시 방법 및 그를 이용한 장치
WO2015130149A1 (ko) 무선 통신 시스템에서 어플리케이션 데이터를 디스플레이하기 위한 방법 및 장치
WO2016027977A1 (ko) 360도 공간영상 재생방법 및 그 시스템
KR100606785B1 (ko) 네트워크를 통한 원격 멀티미디어 서비스 제공시스템에서의 동영상 및 이미지 데이터의 동기화 방법
WO2016129981A1 (ko) 미디어 데이터를 송수신하는 방법 및 장치
CN109168059A (zh) 一种在不同设备上分别播放音频与视频的唇音同步方法
WO2019004783A1 (ko) 다채널 영상을 위한 전송 시스템 및 이의 제어 방법, 다채널 영상 재생 방법 및 장치
JP2018117259A (ja) オーディオビデオ同期取込によって一対多オーディオビデオストリーミングを行う方法
WO2016056804A1 (en) Content processing apparatus and content processing method thereof
US20240107087A1 (en) Server, terminal and non-transitory computer-readable medium
Tang et al. Audio and video mixing method to enhance WebRTC
EP3316593B1 (en) Method and device for implementing synchronous playing
WO2015064854A1 (ko) 멀티앵글영상서비스의 사용자인터페이스 메뉴 제공방법 및 사용자 인터페이스메뉴 제공장치
US20210227005A1 (en) Multi-user instant messaging method, system, apparatus, and electronic device
WO2018155910A1 (ko) 중계 방송을 지원하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체
WO2013154364A1 (ko) 스트리밍 재생 방법 및 이를 이용한 컴퓨팅 장치
WO2023231478A1 (zh) 音视频共享方法、设备及计算机可读存储介质
US10616724B2 (en) Method, device, and non-transitory computer-readable recording medium for supporting relay broadcasting using mobile device
JP2020174378A (ja) 異種ネットワーキング環境におけるメディアレンダリングの同期化
WO2016018102A1 (ko) 클라우드 스트리밍 기반 방송 연동형 서비스 시스템, 방송 연동형 서비스 클라이언트 장치, 트리거 컨텐츠 제공 서버 및 이를 이용한 방법
WO2022055198A1 (ko) 다중 라이브 송출 환경에서의 채널 간 고속 전환 모드를 구현하는 방법, 시스템, 및 컴퓨터 판독가능한 기록 매체
WO2015064855A1 (ko) 멀티앵글영상촬영을 위한 사용자인터페이스 메뉴 제공방법 및 사용자 인터페이스메뉴 제공장치
WO2015037761A1 (ko) 멀티앵글영상서비스 제공 방법 및 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18757961

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 29/11/2019)

122 Ep: pct application non-entry in european phase

Ref document number: 18757961

Country of ref document: EP

Kind code of ref document: A1