KR101957807B1 - 다인칭 시점의 sns 라이브 방송을 위한 오디오 중계 방법 및 시스템 - Google Patents

다인칭 시점의 sns 라이브 방송을 위한 오디오 중계 방법 및 시스템 Download PDF

Info

Publication number
KR101957807B1
KR101957807B1 KR1020180061650A KR20180061650A KR101957807B1 KR 101957807 B1 KR101957807 B1 KR 101957807B1 KR 1020180061650 A KR1020180061650 A KR 1020180061650A KR 20180061650 A KR20180061650 A KR 20180061650A KR 101957807 B1 KR101957807 B1 KR 101957807B1
Authority
KR
South Korea
Prior art keywords
media
data
broadcast
audio data
audio
Prior art date
Application number
KR1020180061650A
Other languages
English (en)
Inventor
진창기
Original Assignee
(주) 비투아이
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 비투아이 filed Critical (주) 비투아이
Priority to KR1020180061650A priority Critical patent/KR101957807B1/ko
Application granted granted Critical
Publication of KR101957807B1 publication Critical patent/KR101957807B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H04N21/6334—Control signals issued by server directed to the network components or client directed to client for authorisation, e.g. by transmitting a key
    • H04N21/63345—Control signals issued by server directed to the network components or client directed to client for authorisation, e.g. by transmitting a key by transmitting keys

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Economics (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

다인칭 시점의 SNS 라이브 방송을 위한 오디오 중계 방법 및 시스템이 개시된다. 다인칭 시점의 미디어 중계를 위한 라이브 방송 제공 방법에 있어서, 영상 녹화 장치에서 촬영된 미디어 데이터를 미디어 중계 장치를 통해 수신하는 단계, 수신된 미디어 데이터를 대상으로 오디오 데이터와 영상 데이터를 분리하는 단계, 방송 관계자용 오디오 송출 장치로부터 수신된 오디오 데이터와 분리된 상기 오디오 데이터를 합성하는 단계, 합성된 상기 오디오 데이터를 엔코딩(encoding)하는 단계, 엔코딩된 상기 오디오 데이터와 상기 영상 데이터를 재합성하여 단일 미디어 스트림을 생성하는 단계, 및 생성된 상기 단일 미디어 스트림을 라이브 방송하고자 하는 복수의 SNS 서버 각각으로 다중 분배하여 전송하는 단계를 포함할 수 있다.

Description

다인칭 시점의 SNS 라이브 방송을 위한 오디오 중계 방법 및 시스템{METHOD AND SYSTEM OF AUDIO RETRANSMITION FOR SOCIAL NETWORK SERVICE LIVE BROADCASTING OF MULTI-PEOPLE POINTS}
본 발명의 실시예들은 유/무선 네트워크 기능을 지닌 다양한 개인용 영상 녹화 장치(즉, 영상 촬영 장치)와 연동 가능한 개인용 미디어 중계 장치와 다수의 SNS 사이트로 동시 라이브 방송이 가능한 SNS(Social Network Service, SNS) 라이브 중계 서버 상에서, 방송 송출자와 더불어 인터넷을 통해 SNS 라이브 방송 참여를 원하는 SNS 방송 관계자들(아나운서, 해설자, 음향기술자 등)의 음성 또는 오디오를 SNS 라이브 방송 시청자들에게 제공하여 1인칭 시점의 SNS 라이브 방송에서 탈피하여 다인칭 시점의 SNS 라이브 방송 서비스를 제공하는 기술에 관한 것이다.
2000년대 중반, 인터넷 방송의 대명사라 할 수 있는 국내 아프리카 TV가 라이브 방송을 시작한 이후, 2015년에 들어서 유투브, 페이스북, 트위터 등 SNS(Social Networking Service)의 대명사라 일컫는 웹사이트에서 라이브 방송을 지원하고 그 사용영역을 일반인에게까지 확대하고 있다. SNS는 관계형 지인 뿐만 아니라 불특정 다수의 전 세계 사람들이 하나의 관심사에 함께 할수 있기 때문에 일반 방송보다 폭넓고 다양한 주제를 다룰 수 있다.
현재 SNS 라이브(LIVE) 방송(즉, 실시간 스트림 방송)은 스트리머(streamer), 개인방송 BJ(Broadcasting Jackie) 등의 방송 제공자가 SNS 서버에서 제공하는 웹/모바일웹 사이트를 통해서 방송 시청자에게 단방향으로 제공되고 있다. 즉, 방송 제공자가 유튜브(youtube), 페이스북 등에서 지원하는 라이브 방송 채널을 통해 1인방송, 개인방송 등의 라이브 방송이 유튜브, 페이스북에 접속한 방송 시청자들에게 제공되고 있다. 이러한, SNS 라이브 방송은 방송 제공자가 SNS 방송 시청자에게 단방향으로 방송 제공자의 의견 또는 현장 상황을 전달하는 방식으로 1인칭 시점의 개인 방송의 한계를 벗어나고 있지 못하고 있다.
이에 따라, SNS 라이브 방송이 TV 방송과 같이 다양한 장르, 예컨대, 뉴스, 다큐멘터리, 토론, 시사 프로그램 등의 채널을 이루기 위해 다인칭 시점의 SNS 라이브 방송이 제공될 필요가 있다.
한국등록특허 제10-1633901호는 소셜 네트워크를 이용한 라이브 방송서비스 제공방법에 관한 것으로, 가입자가 단말기에 Live 방송 모드와 녹화 방송 모드가 형성된 어플리케이션을 소셜 서비스 서버에서 다운받아 설치하고, Live 방송모드를 선택하면, 현지 상황을 실시간으로 라이브 방송으로 전송하는 기술이 개시되어 있다.
인터넷을 기반으로 이루어지고 있는 SNS 기반 라이브 방송을 제공함에 있어서, 아나운서, 해설자, 리포터, 음향 기술자 등의 방송 관계자기반 오디오 데이터를 방송 제공자의 오디오 데이터와 합성하여 현장에서 실시간으로 촬영되는 영상 데이터와 결합하여 제공함으로써, 방송 제공자, 방송 관계자 및 현장이라는 다인칭 시점의 라이브 방송을 SNS 서버에 접속한 방송 시청자에게 제공하고자 한다.
또한, 방송 제공자와 SNS 서버에 접속한 방송 시청자 사이에 미디어 중계 장치 및 중계 서버를 두고, SNS 라이브 방송을 다중 중계함으로써, 복수의 서로 다른 SNS 서버를 통해 보다 다양한 방송 시청자들에게 동시에 라이브 방송을 제공하고자 한다.
다인칭 시점의 미디어 중계를 위한 라이브 방송 제공 방법에 있어서, 영상 녹화 장치에서 촬영된 미디어 데이터를 미디어 중계 장치를 통해 수신하는 단계, 수신된 미디어 데이터를 대상으로 오디오 데이터와 영상 데이터를 분리하는 단계, 방송 관계자용 오디오 송출 장치로부터 수신된 오디오 데이터와 분리된 상기 오디오 데이터를 합성하는 단계, 합성된 상기 오디오 데이터를 엔코딩(encoding)하는 단계, 엔코딩된 상기 오디오 데이터와 상기 영상 데이터를 재합성하여 단일 미디어 스트림을 생성하는 단계, 및 생성된 상기 단일 미디어 스트림을 라이브 방송하고자 하는 복수의 SNS 서버 각각으로 다중 분배하여 전송하는 단계를 포함할 수 있다.
일측면에 따르면, 상기 수신된 미디어 데이터에서 분리된 오디오 데이터는, 상기 미디어 중계 장치에 마련된 마이크를 통해 수신된 방송 제공자의 오디오 신호와 상기 영상 녹화 장치에서 촬영된 미디어 데이터에 포함된 촬영 현장의 오디오 신호를 합성한 오디오 데이터를 나타낼 수 있다.
다른 측면에 따르면, 상기 전송하는 단계는, 상기 엔코딩된 오디오 데이터를 상기 미디어 중계 장치로 전송하는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 오디오 데이터를 합성하는 단계는, 상기 방송 관계자용 오디오 송출 장치로부터 수신된 복수의 방송 관계자 각각에 해당하는 오디오 데이터를 디코딩(decoding)하는 단계, 및 디코딩된 상기 방송 관계자 각각에 해당하는 오디오 데이터와 상기 미디어 중계 장치로부터 수신된 미디어 데이터에서 분리되어 디코딩된 오디오 데이터를 합성하는 단계를 포함할 수 있다.
또 다른 측면에 따르면, 상기 영상 녹화 장치에서 촬영된 미디어 데이터는, 상기 영상 녹화 장치 및 미디어 중계 장치가 무인 항공기(unmanned aerial vehicles), 무인 지상 차량(unmanned ground vehicles) 및 무인 로봇(unmanned robots)에 탑재되어 현장이 촬영됨에 따라 방송 제공자의 오디오 데이터가 제외된 데이터를 나타낼 수 있다.
또 다른 측면에 따르면, 미리 등록된 상기 미디어 중계 장치의 고유 정보 및 방송 제공자의 사용자 정보와 상기 미디어 중계 장치로부터 수신된 고유 정보 및 사용자 정보에 기초하여 상기 미디어 중계 장치를 인증하는 단계, 및 상기 미디어 중계 장치를 인증 성공함에 따라, 상기 방송 제공자가 라이브 방송을 원하는 복수의 SNS 서버의 URL 정보 및 해당 SNS 서버로부터 할당받은 스트림 키(KEY) 정보를 상기 미디어 중계 장치로부터 수신하는 단계, 및 수신된 상기 SNS 서버의 URL 정보 및 스트림 키 정보와 상기 방송 제공자와 연관하여 미리 등록된 SNS 서버의 URL 정보 및 스트림 키 정보에 기초하여 상기 미디어 중계 장치로부터 미디어 데이터의 수신 허락 여부를 인증하는 단계를 더 포함할 수 있다.
또 다른 측면에 따르면, 상기 미디어 데이터를 미디어 중계 장치를 통해 수신하는 단계는, 미디어 데이터의 수신 허락 인증에 성공함에 따라, 상기 미디어 중계 장치로부터 상기 미디어 데이터를 수신하는 단계, 및 상기 미디어 데이터의 수신 허락 인증에 실패함에 따라, 상기 미디어 데이터의 스트리밍 전송을 위해 설정된 상기 미디어 중계 장치와의 통신 세션을 연결 해제하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 인터넷을 기반으로 이루어지고 있는 SNS 기반 라이브 방송을 제공함에 있어서, 아나운서, 해설자, 리포터, 음향 기술자 등의 방송 관계자기반 오디오 데이터를 방송 제공자의 오디오 데이터와 합성하여 현장에서 실시간으로 촬영되는 영상 데이터와 결합하여 제공함으로써, 방송 제공자, 방송 관계자 및 현장이라는 다인칭 시점의 라이브 방송을 SNS 서버에 접속한 방송 시청자들에게 제공할 수 있다.
또한, 방송 제공자와 SNS 서버에 접속한 방송 시청자 사이에 미디어 중계 장치 및 중계 서버를 두고 SNS 라이브 방송을 다중 중계함으로써, 복수의 서로 다른 SNS 서버를 통해 보다 다양한 방송 시청자들에게 동시에 라이브 방송을 제공할 수 있다.
또한, 영상 녹화 장치 및 미디어 중계장치를 드론 등의 무인 항공기(UAV)에 탑재하여 강, 산 등 항공촬영의 SNS 라이브 방송을 제공함으로써, 방송 제공자가 해당 방송 현장에서 음성 송출이 어려운 경우에도, 방송 관계자용 오디오 송출 장치 및 중계 서버를 통해 방송 제공자가 라이브 방송에 참여하여 본인이 라이브 방송 중인 무음의 SNS 라이브 방송에 방송 제공자의 음성을 합성하여 제공 가능하도록 할 수 있다. 즉, SNS 기반 라이브 방송 시 방송 제공자가 장소에 구애받지 않고 라이브 방송이 가능하도록 제공할 수 있다.
또한, 산불, 지진 등 재난 시 현장 영상을 동시에 다수의 SNS 서버의 웹/모바일웹 사이트를 통해 여러 시청자 단말들로 동시에 생중계함에 있어서, 인터넷을 통한 전문가(즉, 방송 관계자)의 실시간 의견과 설명을 함께 생중계함으로써 정규 재난 방송을 접하기 어려운 상황에 놓여 있는 사용자들에게 다양한 형태로 재난 방송을 제공할 수 있다. 뿐만 아니라, 재난의 실 위험도를 효과적으로 전달하여 재난에 처한 사용자가 대피 및 적절한 대응 방안을 강구하도록 제공할 수 있다.
도 1은 본 발명의 일실시예에 있어서, 라이브 방송 중계 시스템의 네트워크 환경을 도시한 도면이다.
도 2는 본 발명의 일실시예에 있어서, 중계 서버의 내부 구성을 도시한 블록도이다.
도 3은 본 발명의 일실시예에 있어서, 라이브 방송 중계 방법을 도시한 흐름도이다.
도 4는 본 발명의 일실시예에 있어서, 중계 서버와 방송 관계자용 송출 장치의 네트워크 구성을 도시한 도면이다.
도 5는 본 발명의 일실시예에 있어서, 미디어 중계 장치의 동작을 설명하기 위해 제공되는 도면이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
본 발명의 실시예들은 영상 녹화 장치를 이용하여 현장을 촬영한 미디어 데이터를 대상으로 다인칭 시점의 SNS 라이브(LIVE) 방송을 제공하는 기술에 관한 것으로, 특히, 상기 미디어 데이터에 방송 제공자 및 방송 관계자의 오디오 신호를 합성하여 다양한 SNS 서버들에 접속한 방송 시청자들에게 제공하는 기술에 관한 것이다.
본 실시예들에서, "영상 녹화 장치"는 현장을 촬영하는 촬영 장치로서, 예컨대, 영상 녹화 장치는 액션캠, IP 카메라, 캠코더, PC캠/웹캠 등을 포함할 수 있다.
본 실시예들에서, "방송 제공자"는 SNS 서버를 통해 실시간으로 1인 방송, 개인방송 등을 수행하는 BJ(Broadcasting Jackie), 스트리머(streamer)를 나타낼 수 있다.
본 실시예들에서, "방송 시청자"는 SNS 서버에서 제공하는 웹/모바일웹 사이트에 접속하여 실시간 개인방송 등을 시청하는 사용자를 나타내는 것으로서, 예컨대, 방송 시청자는 SNS 서버의 웹/모바일웹 사이트에 접속한 스마트폰(smartphone), 태블릿(tablet), PC, 노트북 등의 시청자 단말을 나타낼 수 있다.
본 실시예들에서, 영상 녹화 장치에서 촬영된 영상은 방송국이 아닌 1인 방송, 개인 방송 등을 위해 개인 또는 드론(drone) 등의 무인 항공기(Unmanned Aerial Vehicle), 무인 지상 차량(unmanned ground vehicles) 및 무인 로봇(unmanned robots)에 탑재되어 현장에서 촬영된 영상을 나타낼 수 있다. 예컨대, 영상 녹화 장치에서 촬영된 영상은 BJ의 개인 방송 영상, 사람이 접근하기 어려운 화재, 화산폭발 등의 재난 현장, 절벽, 주상절리 근처의 자연 경관을 촬영한 영상, 바다 한 가운데의 해양 영상 등을 포함할 수 있다.
도 1은 본 발명의 일실시예에 있어서, 라이브 방송 중계 시스템의 네트워크 환경을 도시한 도면이다.
도 1은 영상 녹화 장치(110), 미디어 중계 장치(120), 중계 서버(130), SNS 서버(140) 및 시청자 단말(150)을 포함할 수 있다. 중계 서버(130)는 라이브 방송 중계 시스템을 나타내는 것으로서, 라이브 방송 중계 시스템은 서버 장치인 중계 서버(130)에 플랫폼(platform) 형태로 구현될 수도 있고, 미디어 중계 장치(120)에 임베디드된(embedded) 형태로 구현될 수도 있다.
도 1에서는 영상 녹화 장치(110)에서 현장 촬영 시 촬영된 영상 데이터와 방송 제공자의 음성에 해당하는 오디오 데이터를 포함하는 미디어 데이터가 미디어 중계 장치(120)를 통해 중계 서버(130)로 제공되는 것으로 도시하였으나, 이는 실시예에 해당되며, 영상 녹화 장치(110) 및 미디어 중계 장치(120)가 드론 등의 무인 항공기에 탑재되어 현장을 촬영한 경우, 방송 제공자가 현장에 접근하기 어려우므로, 방송 제공자의 음성에 해당하는 오디오 데이터가 상기 미디어 데이터에서 제외되거나, 무음 또는 현장음의 미디어 데이터가 중계 서버(130)로 전송될 수 있다.
영상 녹화 장치(110)는 유/무선 네트워크를 위한 통신 모듈을 구비하여, 현장에서 촬영된 영상을 유/무선 네트워크를 통해 개인용 미디어 중계 장치(120)로 전송할 수 있다. 예컨대, 영상 녹화 장치(110)는 이더넷(Ethernet), 와이파이(WiFi), LTE 등으로 촬영 영상을 미디어 중계 장치(120)로 전송할 수 있다.
미디어 중계 장치(120)는 방송국이 아닌 개인용 미디어 중계 장치로서, 개인 방송을 제공하려는 방송 제공자 및 영상 녹화 장치가 위치하는 현장에 위치하거나, 영상 녹화 장치와 함께 무인 항공기(UAV)에 탑재되어 방송 제공자와는 별도로 위치할 수 있다.
미디어 중계 장치(120)는 라이브 방송 중계 시스템인 중계 서버(130)와 양방향으로 통신하기 위한 어플리케이션을 미리 설치하여 구동할 수 있다. 미디어 중계 장치(120)는 영상 녹화 장치(110)에서 촬영된 영상을 대상으로 중계 서버(130)로 전송하기 위한 영상 처리를 수행할 수 있다. 그리고, 영상 처리된 영상을 네트워크를 통해 중계 서버(130)로 전송할 수 있다. 이때, 미디어 중계 장치(120)는 마이크(microphone)를 통해 입력된 방송 제공자의 음성에 해당하는 오디오 데이터를 영상 녹화 장치(110)로부터 수신한 미디어 데이터에 합성하여 중계 서버(130)로 제공할 수 있다. 예컨대, 미디어 중계 장치(120)는 영상 녹화 장치(110)로부터 수신된 미디어 데이터 및 마이크를 통해 입력되는 방송 제공자의 오디오 데이터를 MPEG 등의 미리 지정된 비디오 코덱 및 오디오 코덱(codec)에 기초하여 규격에 맞게 신호 처리를 수행한 후, 중계 서버(130)로 전송할 수 있다. 이때, 중계 서버(130)로 전송되는 미디어 데이터는 단일 스트림(즉, 단일 미디어 스트림)에 해당할 수 있다.
중계 서버(130)는 미디어 중계 장치(120)로부터 수신된 단일 미디어 스트림을 방송 제공자가 소지한 사용자 단말(즉, 방송 제공자 단말)에서 미리 등록한 복수의 SNS 서버들 관련 방송 정보에 기초하여 해당 SNS 서버로 동시에 멀티스트림 전송할 수 있다.
이때, 중계 서버(130)는 미디어 중계 장치(120)로부터 수신되는 미디어 데이터에 아나운서, 해설자, 리포터, 음향 기술자 등의 방송 관계자의 음성에 해당하는 오디오 데이터를 합성하여 방송 제공자가 방송하고자 하는 복수의 서로 다른 SNS 서버들 각각으로 제공할 수 있다. 그리고, 중계 서버(130)는 방송 관계자의 음성에 해당하는 오디오 데이터를 미디어 중계 장치(120)로 제공할 수 있으며, SNS 서버들로부터 수신되는 방송 시청자의 의견을 오디오 데이터로 변환하여 미디어 중계 장치(120)로 전달할 수 있다. 예를 들어, SNS 서버에서 라이브 방송을 제공받는 화면 상에 마련된 채팅창을 통해 해당 방송과 관련하여 시청자 단말에서 입력하는 텍스트 형태의 방송 의견을 방송 관계자가 읽어 오디오 데이터로서 변환되어 미디어 중계 장치(120)를 통해 방송 제공자에게 전달될 수 있다.
일례로, 유튜브, 페이스북, 유스트림과 같이 3개의 SNS 서버의 웹사이트를 통해 방송 제공자의 영상을 라이브 방송하고자 하는 경우, 중계 서버(130)는 방송 제공자 단말을 통해 상기 3개의 SNS 서버로부터 방송 제공자가 라이브 방송을 위해 할당받은 방송 정보(예컨대, 방송 제공자의 영상을 라이브 방송하기 위한 SNS서버로의 연결을 위한 URL 정보 및 스트림 키(key) 정보 등)를 데이터베이스에 미리 저장 및 유지하고 있을 수 있다. 그러면, 중계 서버(130)는 수신된 단일 스트림을 상기 URL 정보 및 스트림 키 정보에 기초하여 3개의 SNS 서버 각각으로 동시에 다중 분배할 수 있다. 그러면, 복수의 SNS 서버들 각각에 접속한 시청자 단말들(150)은 방송 제공자의 영상을 라이브 시청할 수 있다. 예컨대, 유튜브에 접속한 시청자 단말 1, 페이스북에 접속한 시청자 단말 2 및 유스트림에 접속한 시청자 단말 3은 영상 녹화 장치(110)에서 촬영된 영상을 기반으로 방송 제공자 및 방송 관계자의 음성에 해당하는 오디오 데이터가 합성된 미디어 데이터를 실시간으로 동시에 제공받아 재생할 수 있다.
도 2는 본 발명의 일실시예에 있어서, 중계 서버의 내부 구성을 도시한 블록도이고, 도 3은 본 발명의 일실시예에 있어서, 라이브 방송 중계 방법을 도시한 흐름도이다.
도 2는 라이브 방송 중계 시스템이 중계 서버(200)에 구현될 수 있으며, 중계 서버(200)는 미디어 수신부(210), 데이터 분리부(220), 오디오 합성부(230), 엔코딩부(240), 미디어 스트림 생성부(250) 및 다중 전송 제어부(260)를 포함할 수 있다. 그리고, 도 2에 도시되진 않았으나, 중계 서버(200)는 미디어 중계 장치(120) 및 미디어 스트림의 전송 여부 인증을 위한 구성, 예컨대, 인증부(미도시)를 더 포함할 수 있다. 도 2에서 중계 서버(200)는 도 1의 중계 서버(130)에 해당할 수 있다.
도 3의 각 단계들(310 내지 350)은 도 2의 중계 서버(200)의 구성 요소인 미디어 수신부(210), 데이터 분리부(220), 오디오 합성부(230), 엔코딩부(240), 미디어 스트림 생성부(250) 및 다중 전송 제어부(260)에 의해 수행될 수 있다.
먼저, 영상 녹화 장치(201)에서 현장을 촬영하고, 촬영된 영상을 서로 다른 SNS 서버에 접속한 시청자 단말들로 실시간으로 라이브 방송 하기 이전에, 라이브 방송을 위한 사전 처리가 수행될 수 있다. 이러한 사전 처리를 위해 중계 서버(200)는 정보 등록부(미도시)를 더 포함할 수 있다.
일례로, 정보 등록부는 방송 제공자가 소지한 방송 제공자 단말(예컨대, PC, 태블릿, 스마트폰 등)에 설치된 어플리케이션 또는 방송 제공자 단말에서 접속한 복수의 SNS관련 웹/모바일웹 사이트를 통해 입력된 정보들을 방송 제공자와 연관하여 데이터베이스에 등록할 수 있다. 예컨대, 정보 등록부는 방송 제공자 단말로부터 라이브 방송을 제공하고자 하는 복수의 SNS(Social Network Service)관련 방송정보, 미디어 중계 장치의 고유 정보, 및 방송 제공자의 사용자 정보를 입력받아 연관하여 데이터베이스에 등록할 수 있다. 여기서, SNS관련 방송정보는 방송 제공자의 개인 방송을 라이브 방송하기 위해 해당 SNS 서버로부터 방송 제공자가 할당받은 URL 정보 및 스트림 키(key) 정보를 포함할 수 있다. 그리고, 미디어 중계 장치의 고유 정보는 인증을 위해 이용되는 것으로서, 미디어 중계 장치의 제조 시에 부여된 제품 기기 번호 등을 포함할 수 있다. 방송 제공자 단말의 사용자 정보는 방송 제공자를 식별하기 위한 정보로서, 즉, 중계 서버(200)를 통해 복수의 SNS 서버들로 라이브 방송을 다중 분배하기 위해 방송 제공자를 인증하기 위한 정보를 나타낼 수 있다. 예컨대, 방송 제공자 단말의 사용자 정보는 중계 서버(200)의 웹/모바일웹 사이트를 통해 방송 제공자가 가입한 아이디(ID) 정보, 방송 제공자의 스마트폰 전화번호, 이메일 주소 정보 등을 포함할 수 있다.
310 단계에서, 미디어 수신부(210)는 영상 녹화 장치(201)에서 촬영된 미디어 데이터를 미디어 중계 장치(202)를 통해 수신할 수 있다. 이때, 상기 미디어 데이터를 중계 서버(200)로 전송하기 위한 프로그램 또는 어플리케이션이 미디어 중계 장치(202)에 설치되어 구동될 수 있다. 예컨대, 방송 제공자가 SNS 서버를 통해 실시간으로 라이브 방송을 하고자 하는 경우, 영상 녹화 장치(201)에서 촬영된 영상을 유/무선 네트워크를 통해 미디어 중계 장치(202)에서 중계 서버(200)로 전송하기 위한 통신 세션을 설정하는 등의 기능을 위한 프로그램 모듈을 미디어 중계 장치(202)는 중계 서버(200)로부터 다운로드받아 미리 설치할 수 있다.
일례로, 중계 서버(200)의 인증부(미도시)는 미디어 중계 장치(202)로부터 미디어 데이터를 수신하기 이전에 미디어 중계 장치(202)를 인증하는 동작을 먼저 수행할 수 있다. 그리고, 미디어 중계 장치(202)의 인증에 성공하면, 미디어 중계 장치(202)로부터 전송되는 미디어 데이터의 수신 허락 여부를 인증할 수 있다. 미디어 데이터의 수신 허락 인증에 성공하면, 미디어 수신부(210)는 미디어 중계 장치(202)에서 전송되는 미디어 데이터를 수신할 수 있다. 이때, 미디어 중계 장치(202)의 인증에 성공하여 미디어 중계 장치(202)와 중계 서버(200) 간의 통신 세션이 설정되었으나, 미디어 데이터의 수신 허락 인증에 실패한 경우, 미디어 수신부(210)는 상기 미디어 중계 장치(202)로부터 미디어 데이터의 스트리밍 전송을 위해 설정된 통신 세션을 강제적으로 연결 해제할 수 있다.
320 단계에서, 데이터 분리부(220)는 미디어 중계 장치(202)로부터 수신된 미디어 데이터를 대상으로 영상 데이터와 오디오 데이터를 분리할 수 있다.
일례로, 미디어 중계 장치(202)로부터 수신된 미디어 데이터는 영상 녹화 장치(201)에서 촬영된 현장을 나타내는 영상 데이터 및 촬영 현장의 오디오 데이터를 포함할 수 있다. 이때, 현장이 재난 현장 등과 같이 방송 제공자가 접근하기 어려워 방송 제공자가 영상 녹화 장치(202) 및 미디어 중계 장치(202)와 별도의 장소에 위치하는 경우, 예컨대, 방송 제공자는 자신의 집에서 방송 시청 단말(PC, 태블릿, 스마트폰 등)을 이용하여 무인 항공기(UAV)에 탑재된 영상 녹화 장치(201) 및 미디어 중계 장치(202)로부터 촬영 및 전송된 현장을 중계 서버(200)를 통해 미디어 데이터를 수신하는 경우, 해당 미디어 데이터는 방송 제공자의 음성이 제외되고 재난 현장음만을 포함하거나 또는 무음, 즉, 오디오 데이터가 제외된 상태로 영상 데이터만을 포함할 수 있다. 이러한 경우 관계자용 오디오 송출 장치를 통해 재난 현장과는 개별적으로 방송 제공자의 음성에 해당하는 오디오 데이터가 중계 서버(200)로 입력될 수 있으며, 입력된 오디오 데이터와 상기 미디어 중계 장치(202)로부터 수신된 미디어 데이터가 별개로 중계 서버(200)로 전송될 수 있다. 그러면, 데이터 분리부(220)는 미디어 중계 장치(202)로부터 수신된 미디어 데이터를 대상으로 영상 데이터 및 오디오 데이터(즉, 미디어 중계 장치(202)에서 합성된 상기 무음 또는 현장 오디오 데이터)를 분리할 수 있다.
일례로, 방송 제공자와 영상 녹화 장치(201)가 동일 장소(즉, 동일 공간)에 위치하는 경우, 방송 제공자와 미디어 중계 장치(202), 및 영상 녹화 장치(201)는 동일 공간 또는 유/무선망을 통해 연결 가능한 근거리 공간에 위치할 수 있다. 그러면, 영상 녹화 장치(201)의 무음 또는 현장 오디오 데이터와 함께 방송 관계자의 음성이 미디어 중계 장치(202)에서 합성되어 중계 서버(200)로 전송될 수 있다.
다른 예로, 방송 제공자와 영상 녹화 장치(201)가 다른 장소(즉, 서로 다른 공간)에 위치하는 경우, 즉, 방송 제공자가 영상 녹화 장치(201) 및 미디어 중계 장치(202)와 별개의 공간에 존재 시, 방송 제공자는 미디어 중계 장치(202)가 아닌 방송 관계자의 오디오 송출 장치를 통해 방송 제공자의 음성을 중계 서버(200)로 전송할 수 있다.
330 단계에서, 오디오 합성부(230)는 미디어 중계 장치(202)로부터 수신된 미디어 데이터에서 분리된 오디오 데이터와 방송 관계자용 오디오 송출 장치(예컨대, 아나운서, 해설자, 리포터 등이 소지한 사용자 단말)로부터 수신된 방송 관계자의 음성에 해당하는 오디오 데이터를 합성할 수 있다. 여기서, 방송 관계자의 음성에 해당하는 오디오 데이터는, 상기 미디어 데이터에 포함된 영상 데이터와 관련하여 방송 관계자가 실시간으로 이야기하는 전문적인 해설, 멘트(announcement), 보충 설명 등의 음성 신호에 해당하는 오디오 데이터를 나타낼 수 있다.
340 단계에서, 엔코딩부(240)는 상기 합성된 오디오 데이터를 대상으로 미리 지정된 오디오 코덱(audio codec)에 기초하여 엔코딩(encoding)을 수행할 수 있다.
350 단계에서, 미디어 스트림 생성부(250)는 엔코딩된 상기 오디오 데이터와 영상 데이터(즉, 비디오 데이터)를 재합성하여 단일 미디어 스트림을 생성할 수 있다.
360 단계에서, 다중 전송 제어부(260)는 생성된 상기 미디어 스트림을 방송 제공자가 방송하고자 하는 복수의 SNS 서버 각각으로 다중 분배하여 전송할 수 있다.
예를 들어, 방송 하고자 하는 복수의 SNS 서버 각각으로부터 할당받는 실시간으로 개인방송을 위한 URL 정보 및 스트림 키(Key) 정보에 기초하여 해당 SNS 서버로 상기 생성된 미디어 스트림을 다중 분배하여 전송할 수 있다.
이때, 다중 전송 제어부(260)는 상기 엔코딩된 오디오 데이터를 미디어 중계 장치(202)로 전송할 수 있다. 그러면, 미디어 중계 장치(202)는 스피커를 통해 상기 엔코딩된 오디오 데이터를 방송 제공자에게 제공할 수 있다. 즉, 방송 관계자가 실시간으로 이야기하는 전문적인 해설, 멘트(announcement), 보충 설명 등의 음성 신호에 해당하는 오디오 데이터가 미디어 중계 장치(202)를 통해 방송 제공자에게 제공될 수 있다.
도 4는 본 발명의 일실시예에 있어서, 중계 서버와 방송 관계자용 송출 장치의 네트워크 구성을 도시한 도면이다.
즉, 도 4는 중계 서버에서 방송 관계자용 송출 장치로부터 수신된 오디오 데이터를 기반으로 복수의 SNS 서버로 미디어 데이터를 다중 분배하여 라이브 방송을 제공하는 동작을 설명하기 위해 제공되는 도면이다.
도 4에서, 중계 서버(400)는 도 2의 중계 서버(200)에 해당하는 것으로서, 도 4의 사용자 환경 설정 관리부는 도 2의 미디어 수신부(210)에 해당하고, 도 4의 SNS 사이트 라이브 방송 정보 등록부 및 미디어 중계 장치 정보 등록부는 도 2에서 설명한 정보 등록부(미도시)에 포함되고, 도 4의 SNS 사이트 라이브 방송 정보 임시 생성부, 미디어 스트리밍 수신부 및 미디어 스트리밍 인증부는 도 2에서 설명한 미디어 수신부(210) 및 인증부(미도시)에 포함될 수 있다. 그리고, 도 4의 오디오/비디오 분리기는 도 2의 데이터 분리부(220)에 해당하고, 도 4의 오디오 디코딩부, 오디오 합성부, 관계자 오디오 스트리밍 수신부, 관계자 오디오 스트리밍 전송부는 도 2의 오디오 합성부(230)에 포함되고, 도 4의 오디오 엔코딩부는 도 2의 엔코딩부(240)에 포함되고, 도 4의 오디오/비디오 재합성부는 도 2의 미디어 스트림 생성부(250)에 해당할 수 있다. 그리고, 도 4의 미디어 스트림 다중 분배기 및 SNS 라이브 서버 스트림 전송부는 도 2의 다중 전송 제어부(260)에 포함될 수 있다. 도 4에서, 사용자 환경 설정 관리부에서 수행되는 기능 중 인증과 관련된 일부 기능은 필요에 따라 도 2의 인증부(미도시)에서 수행될 수 있다.
도 4에서 미디어 중계 장치(401)는 도 2의 미디어 중계 장치(202)에 해당하고, 복수의 SNS 서버(403)는 도 2의 SNS 서버(203)에 해당할 수 있다.
도 4에 따르면, 중계 서버(200, 400)는 미디어 중계 장치(401), 방송 관계자용 오디오 송출 장치(402) 및 복수의 SNS 서버(403)와 라이브 방송 중계를 위한 유/무선 네트워크를 형성할 수 있다.
사용자 환경 설정 관리부는 SNS 서버에서 제공하는 웹/모바일웹 사이트를 통해 라이브 방송을 시작하기 이전에, 상기 라이브 방송을 하고자 하는 방송 제공자(즉, 방송 제공자가 소지한 단말)로부터 방송 제공자가 소유한 미디어 중계 장치의 고유 정보 및 방송 제공자 단말의 사용자 정보를 입력받아 데이터베이스에 등록할 수 있다. 일례로, 방송 제공자 단말은 중계 서버의 웹사이트(예컨대, 홈페이지 또는 SNS 기반 라이브 방송을 위해 제공되는 웹/모바일웹 사이트)에 접속하여 로그인 한 후, 상기 미디어 중계 장치의 고유 정보를 입력할 수 있다. 이때, 사용자 환경 설정 관리부는 방송 제공자 단말의 사용자 정보(예컨대, ID, 스마트폰 전화번호, 이메일 주소 등)를 방송 제공자 단말을 통해 별도로 입력받을 수도 있고, 로그인 정보를 기반으로 상기 사용자 정보를 데이터베이스에서 획득할 수도 있다. 방송 제공자 단말은 웹/모바일웹 사이트에 접속하는 방식 이외에, SNS 기반 라이브 방송 중계를 위한 어플리케이션을 중계 서버(200, 400)로부터 다운로드받아 미리 설치하여 구동할 수도 있다. 그러면, 사용자 환경 설정 관리부는 상기 설치된 어플리케이션을 통해 방송 제공자 단말에서 입력된 미디어 중계 장치의 고유 정보 및 방송 제공자 단말의 사용자 정보를 획득할 수 있다. 그러면, 미디어 중계 장치 정보 등록부는 로그인한 방송 제공자 단말의 사용자 정보(예컨대, ID, 스마트폰 전화번호, 이메일 주소 등)와 상기 미디어 중계 장치의 고유 정보를 연관하여 데이터베이스에 등록할 수 있다.
이때, 사용자 환경 설정 관리부는 미디어 중계 장치의 고유 정보 및 사용자 정보를 입력받으면서, 방송 제공자 단말에 설치된 어플리케이션 또는 웹/모바일웹 사이트를 통해 라이브 방송 중계를 원하는 SNS 서버의 방송 정보를 입력받을 수 있다. 예를 들어, SNS 서버의 방송 정보는 방송 중계하고자 하는 SNS 서버로부터 방송 제공자가 할당받은 URL 정보 및 스트림 키(KEY) 정보를 포함할 수 있다. 그러면, SNS 사이트 라이브 방송 정보 등록부는 사용자 환경 설정 관리부로부터 상기 방송 정보를 전달받아 데이터베이스에 상기 사용자 정보와 연관하여 임시 저장할 수 있다. 이때, 서로 다른 SNS 서버들로부터 할당받은 복수개의 URL 정보 및 스트림 키 정보가 사용자 정보와 연관하여 데이터베이스에 임시 저장될 수 있다. 예컨대, 유튜브를 통해 라이브 방송을 중계하고자 하는 URL 정보와 스트림 키 정보, 페이스북의 라이브 채널을 통해 라이브 방송을 중계하고자 하는 URL 정보와 스트림 키 정보 등이 사용자 정보(예컨대, 방송 제공자의 ID 등)와 연관하여 데이터베이스에 임시 저장될 수 있다.
이처럼, SNS 기반의 라이브 방송을 위한 사전 설정이 완료된 이후, 미디어 중계 장치로부터 라이브 방송을 위한 접속 허용 요청이 수신되면, 사용자 환경 설정 관리부는 접속 허용을 요청한 미디어 중계 장치의 인증을 위한 인증 데이터를 미디어 중계 장치(401)로부터 수신할 수 있다. 예를 들어, 인증 데이터는 XML, JSON 및 미리 정의된 자체프로토콜 데이터 포맷 형태의 미디어 중계 장치의 고유 정보 및 상기 미디어 중계 장치를 소지한 방송 제공자의 사용자 정보를 포함할 수 있다. 즉, 사용자 환경 설정 관리부는 접속 허용을 요청한 미디어 중계 장치(401)로부터 데이터는 XML, JSON 등의 형태로 미디어 중계 장치의 고유 정보와 사용자 정보를 수신할 수 있다.
사용자 환경 설정 관리부는 미디어 중계 장치 정보 등록부에서 데이터베이스에 저장한 미디어 중계 장치의 고유 정보 및 사용자 정보와 상기 미디어 중계 장치(401)로부터 수신된 미디어 중계 장치의 고유 정보와 사용자 정보가 일치하는지 여부를 비교함으로써, 미디어 중계 장치에 대한 인증을 수행할 수 있다.
예를 들어, 일치하여 인증에 성공한 경우, 사용자 환경 설정 관리부는 SNS 사이트 라이브 방송 정보 등록부에서 데이터베이스에 임시 저장한 URL 정보 및 스트림 키 정보를 미디어 중계 장치(401)로 전달할 수 있다. 이때, 미디어 중계 장치(401)에는 중계 서버(400)와의 통신 세션 설정, 정보 송수신을 위해 상호 연동을 위한 프로그램을 다운로드받아 미리 설치될 수 있다. 이처럼, 미디어 중계 장치(401)로 상기 임시 저장한 복수의 SNS 서버 각각에 해당하는 URL 정보 및 스트림 키 정보를 전송한 이후, 데이터베이스에서 상기 전송된 URL 정보 및 스트림 키 정보를 삭제할 수 있다. 이때, 인증에 실패한 경우, 미디어 중계 장치(401)와 설정된 통신 세션 연결을 해제할 수 있다.
이어, SNS 사이트 라이브 방송 정보 임시 생성부는 미디어 중계 장치(401)로부터 현재 방송 제공자가 라이브 방송을 중계하고자 하는 SNS 서버의 URL 정보 및 스트림 키 정보를 수신할 수 있다. 즉, SNS 사이트 라이브 방송 정보 등록부에서 데이터베이스에 임시 저장하고 있는 SNS 서버의 URL 정보 및 스트림 키 정보는 사용자가 방송하려는 현재 시점일수도 있으나, 방송하기 이전에 해당 서비스에 가입할 때, 또는 가입한 이후 이전에 라이브 방송한 과거 시점에 입력된 정보로서 라이브 방송을 하고자 하는 현재 시점과 상이할 수 있다. 이에 따라, SNS 사이트 라이브 방송 정보 등록부에서 데이터베이스에 임시 저장하고 있는 SNS 서버의 URL 정보 및 스트림 키 정보를 미디어 중계 장치(401)로 전송한 이후 데이터베이스에서 삭제할 수 있다. 그리고, 미디어 중계 장치(401)로부터 방송하고자 하는 현재 시점에 실제 방송될 SNS 서버의 URL 정보 및 스트림 키 정보를 수신할 수 있다. 여기서, 상기 현재 시점에 실제 방송될 SNS 서버의 URL 정보 및 스트림 키 정보는 방송하려는 시점에 방송 제공자 단말로부터 미디어 중계 장치(401)가 입력받아 저장하고 있을 수 있다.
이처럼, SNS 사이트 라이브 방송 정보 임시 생성부는 미디어 중계 장치(401)로부터 수신된 현재 방송을 원하는 복수의 SNS 서버의 URL 정보 및 스트림 키 정보를 방송 관리를 위해 마련된 임시 데이터베이스에 기록할 수 있다.
미디어 스트리밍 수신부는 미디어 중계 장치(401)로부터 미디어 데이터를 수신받을 수 있다. 이때, 수신받기 이전에, 미디어 스트리밍 수신부는 미디어 중계 장치(401)의 미디어 데이터 수신이 허락된 상태인지 여부를 확인하기 위한 인증 데이터를 미디어 중계 장치(401)로 요청할 수 있다. 그러면, 요청에 대한 응답으로 인증 데이터가 수신되면 미디어 스트리밍 인증부로 전달할 수 있다. 미디어 스트리밍 인증부는 미디어 중계 장치(401)로부터 수신된 인증 데이터(예컨대, 미디어 중계 장치의 고유 정보와 사용자 정보)와 개인용 미디어 중계 장치 정보 등록부에서 데이터베이스에 등록한 미디어 중계 장치의 고유 정보와 사용자 정보를 비교함으로써, 미디어 데이터의 수신 허락 여부를 인증할 수 있다.
상기 비교를 통해 인증에 실패한 경우, 미디어 스트리밍 수신부는 미디어 중계 장치(401)와 설정된 통신 세션 연결을 해제할 수 있다. 즉, 미디어 데이터에 해당하는 단일 스트림이 수신되고 있더라도 강제적으로 스트리밍 수신을 차단할 수 있다. 그리고, SNS 사이트 라이브 방송 정보 임시 생성부에서 데이터베이스에 임시 저장한 SNS 서버의 URL 정보 및 스트림 키(KEY) 정보를 삭제할 수 있다.
상기 비교를 통해 정보가 일치하여 인증에 성공한 경우, 미디어 스트리밍 인증부는 미디어 스트림 다중 분배기를 구동시킬 수 있다. 그러면, 미디어 스트림 다중 분배기는 SNS 사이트 라이브 방송 정보 임시 생성부에서 데이터베이스에 임시 저장한 SNS 서버의 URL 정보 및 스트림 키(KEY) 정보를 미디어 스트림 다중 분배기로 전달할 수 있다. 그러면, 미디어 스트림 다중 분배기는 미디어 중계 장치(401)로부터 수신된 단일 스트림을 SNS 서버의 URL 정보 및 스트림 키(KEY) 정보를 기반으로 라이브 방송하고자 하는 복수의 SNS 서버 각각으로 다중 분배할 수 있다. 예컨대, 라이브 방송 중계하고자 하는 SNS 서버가 3개인 경우, 미디어 데이터에 해당하는 단일 스트림을 3개로 다중 분배하고, 5개인 경우, 5개로 다중 분배할 수 있다.
이때, 미디어 스트림 다중 분배기는 단순히 미디어 중계 장치(401)로부터 수신된 단일 스트림을 SNS 서버들(403)로 다중 분배하는 것이 아니라, 방송 관계자용 오디오 송출 장치(402)로부터 수신된 오디오 데이터를 상기 단일 스트림에 합성하여 SNS 서버들(403)로 다중 분배할 수 있다.
일례로, 오디오/비디오 분리기는 미디어 스트리밍 수신부에서 미디어 중계 장치(401)로부터 수신한 미디어 데이터를 대상으로, 오디오 데이터와 영상 데이터(즉, 비디오 데이터)를 분리할 수 있다. 그리고, 오디오/비디오 분리기는 분리된 영상 데이터를 오디오/비디오 재합성부로 전달하고, 분리된 오디오 데이터는 방송 관계자용 오디오 송출 장치(402)로부터 수신된 오디오 데이터와의 합성을 위해 오디오 디코딩부로 전달할 수 있다. 그러면, 오디오 디코딩부는 상기 미디어 데이터에서 분리된 오디오 데이터를 PCM 데이터로 디코딩하여 오디오 합성부로 전달할 수 있다.
관계자 오디오 스트리밍 수신부는 방송 관계자용 오디오 송출 장치(402)로부터 오디오 데이터를 수신할 수 있다. 예를 들어, 방송 관계자용 오디오 송출 장치(402)는 아나운서, 해설자, 리포터, 전문가 등이 소지한 스마트폰, 태블릿, PC 등의 사용자 단말로서, 상기 방송 관계자용 오디오 송출 장치(402)에는 방송 관계자의 음성 신호에 해당하는 오디오 데이터를 중계 서버(400, 200)로 전달하기 위한 프로그램 또는 어플리케이션이 미리 설치되어 있을 수 있다. 이때, 방송 관계자용 오디오 송출 장치(402)는 방송하고자 하는 복수개의 SNS 서버에 해당하는 오디오 데이터를 중계 서버(400, 200)로 전송할 수 있다.
일례로, 방송 관계자용 오디오 송출 장치(즉, 방송 관계자의 오디오 송출 장치, 402)는 미디어 중계 장치(401)와 같이 중계 서버(400)로 방송 관계자 인증을 수행할 수 있다. 이때, 인증에 성공한 경우, 방송 관계자용 오디오 송출 장치(402)는 방송 제공자가 중계 서버(400)에 설정한 방송 관계자용 오디오 송출 장치(402)를 위한 중계 서버(400)의 URL 정보 및 스트림 키 정보를 수신받아 해당 정보를 이용하여 오디오 데이터를 송출할 수 있다. 이러한 인증 성공에 따른 중계 서버(400)로의 오디오 데이터 송출까지의 일련의 프로세스를 위해, 방송 관계자용 오디오 송출 장치(402)는 상기 오디오 데이터를 송출하기 이전에, 중계 서버(400)에서 제공하는 웹사이트를 통해 방송 제공자에게 방송 관계자로 참여할지 여부를 동의받을 수 있다. 이때, 방송 관계자용 오디오 송출 장치(402)는 방송 제공자의 방송 관계자로서 미리 등록되어 있을 수 있다. 이처럼, 참여 여부에 동의하고, 상기 방송 제공자의 방송 관계자로서 미리 등록되어 있는 경우, 방송 관계자용 오디오 송출 장치(402)는 상기 오디오 데이터를 중계 서버(400, 200)로 전송할 수 있다.
이때, 복수개의 SNS 서버에 해당하는 오디오 데이터를 중계 서버(400, 200)로 전송할 수 있다. 예컨대, 방송 관계자용 오디오 송출 장치(402)가 N개 또는 N개의 그룹이 됨에 따라, N개의 오디오 데이터가 중계 서버(400, 200)로 전송될 수 있다. 그러면, 방송 관계자용 오디오 송출 장치(402)가 N개인 경우, N개의 오디오 데이터와 미디어 중계 장치(401)로부터 수신되는 미디어 데이터 중 분리된 오디오 데이터가 하나로 합성될 수 있다. 이때, SNS 사이트 별로 오디오 변환 규격이 다른 경우, 상기 합성된 오디오 데이터를 엔코딩(encoding) 시에 SNS 사이트 별로 엔코딩하여 오디오 채널을 분리 생성할 수 있다.
그러면, 관계자 오디오 스트리밍 수신부는 방송 관계자용 오디오 송출 장치(402)로부터 수신되는 복수개의 오디오 데이터(즉, 라이브 방송에 참여하고자 하는 방송 관계자의 수에 해당하는 오디오 데이터)를 오디오 디코딩부로 전달할 수 있다. 오디오 디코딩부는 수신된 복수개의 오디오 데이터를 대상으로 PCM 데이터로 디코딩을 수행한 후 오디오 합성부로 전달할 수 있다. 도 4에서는 오디오 디코딩부가 2개인 것으로 도시하였으나, 이는 이해를 돕기위해 나누어 도시한 것일 뿐, 실질적으로 오디오 디코딩부는 하나로 통합되어 중계 서버(400, 200)에 포함되거나 수신되는 복수개의 오디오 채널 수 만큼 분기되어 별개로 중계 서버(400, 200)에 포함될 수 있다.
오디오 합성부는 디코딩된 상기 미디어 데이터에서 분리된 오디오 데이터와, 디코딩된 방송 관계자의 음성 신호에 해당하는 오디오 데이터를 합성할 수 있다. 즉, 오디오 합성부는 수신된 PCM 오디오 데이터들을 합성하여 오디오 엔코딩부로 전달할 수 있다.
오디오 엔코딩부는 합성된 PCM 오디오 데이터를 사전에 미리 설정 또는 지정된 SNS 서버관련 전용 오디오 코덱(codec)에 기초하여 엔코딩(encoding)을 수행할 수 있다. 그러면, 오디오/비디오 재합성부는 엔코딩된 오디오 데이터와 미디어 중계 장치(401)로부터 수신된 미디어 데이터를 대상으로 분리된 영상 데이터를 재합성함으로써, 영상 녹화 장치(201)에서 촬영된 현장 영상과 관련하여 아나운서, 해설자, 리포터 등의 방송 관계자의 방송 멘트, 해설, 전문적 의견 등을 나타내는 오디오 데이터가 반영된 미디어 데이터를 생성할 수 있다. 이때, 생성된 미디어 데이터는 단일 스트림(즉, 단일 미디어 스트림) 형태일 수 있다. 이에 따라, 미디어 스트림 다중 분배기는 상기 생성된 미디어 데이터를 라이브 방송하고자 하는 복수개의 SNS 서버 각각으로 동시에 전송하기 위한 다중 분배를 수행할 수 있다. 이때, 미디어 스트림 다중 분배기는 단일 미디어 스트림을 SNS 서버 각각에 해당하는 URL 정보 및 스트림 키 정보에 기초하여 복수의 SNS 서버 각각으로 다중 분배할 수 있다. 그러면, SNS 라이브 서버 스트림 전송부는 미디어 중계 장치(401)로부터 수신된 단일 미디어 스트림을 1 내지 N개의 SNS 서버 각각으로 동시에 라이브 방송 중계할 수 있고, 해당 SNS 서버에 접속한 서로 다른 시청자 단말들은 중계 서버(400, 200)에서 다중 분배된 라이브 방송을 동시에 시청할 수 있다. 예컨대, 유튜브, 페이스북, 유스트림 등을 통해 방송 제공자가 방송하고자 하는 미디어 데이터에 방송 관계자의 오디오가 합성되어 서로 다른 여러 시청자들에게 동시에 실시간으로 방송될 수 있다.
한편, 오디오 엔코딩부는 오디오 합성부로부터 전달받은 PCM 오디오 데이터를 미리 정의된 미디어 중계 장치(401)의 오디오 코덱 정보에 기초하여 엔코딩을 수행할 수 있다. 그리고, 엔코딩된 오디오 데이터를 미디어 중계 장치(401)로 전송할 수 있다. 즉, 방송 관계자의 음성을 반영한 오디오 데이터를 방송 제공자에게 제공하기 위해, 방송 관계자의 음성에 해당하는 오디오 데이터를 미디어 중계 장치(401)로 전송할 수 있다. 예컨대, 미디어 중계 장치(401)로부터 수신된 미디어 데이터에서 분리된 오디오 데이터가 무음의 오디오 데이터이거나, 현장음을 포함하는 오디오 데이터인 경우, 무음 또는 현장음에 해당하는 오디오 데이터는 필터링 하고 방송 관계자의 음성(즉, 전문적인 해설, 방송 멘트 등)에 해당하는 오디오 데이터가 합성되어 미디어 중계 장치(401)로 전송될 수 있다. 그러면, 방송 제공자는 방송 현장과 관련된 전문가, 해설가, 리포터, 아나운서 등의 방송 관계자의 의견을 들을 수 있다.
다른 예로, 미디어 중계 장치(401)로부터 수신된 미디어 데이터에서 분리된 오디오 데이터가 무음의 오디오 데이터 또는 현장음을 포함하는 오디오 데이터와 방송 제공자의 음성이 합성된 오디오 데이터인 경우, 무음 또는 현장음과 방송 제공자의 음성에 해당하는 오디오 데이터는 필터링하여 제거하고 방송 관계자의 음성에 해당하는 오디오 데이터를 합성하여 미디어 중계 장치(401)로 전송할 수 있다. 이때, 상기 필터링 중 방송 제공자의 음성 필터링 제거는 수행하지 않고 방송 제공자의 음성을 그대로 포함한 상태에서 상기 방송 관계자의 음성에 해당하는 오디오 데이터를 합성하여 미디어 중계 장치(401)로 전송할 수도 있다.
이외에, SNS 서버에서 시청자 단말들이 실시간으로 시청중인 방송 내용과 관련하여 채팅창을 통해 입력하는 텍스트 형태의 내용(즉, 시청자의 실시간 의견)을 방송 관계자용 오디오 송출 장치(402)로 제공할 수도 있다. 그러면, 상기 시청자의 실시간 의견을 방송 관계자가 마이크를 통해 이야기하는 오디오 데이터를 디코딩 및 엔코딩하여 미디어 중계 장치(401)로 전송함으로써, 방송 제공자가 서로 다른 SNS 서버에 접속한 시청자들의 시청 의견을 실시간으로 확인하면서 라이브 방송을 중계하도록 제공할 수 있다. 이 때, 상기 시청자의 실시간 의견을 이야기하는 방송 관계자는 사람일 수 도 있고 텍스트를 자동 인식하여 오디오 데이터로 변환하는 프로그램이나 장치일 수도 있다.
도 5는 본 발명의 일실시예에 있어서, 미디어 중계 장치의 동작을 설명하기 위해 제공되는 도면이다.
도 5에서, 미디어 중계 장치(500)는 도 2의 미디어 중계 장치(202) 및 도 4의 미디어 중계 장치(401)에 해당하고, 도 5의 중계 서버(502)는 도 2 및 도 4의 중계 서버(200, 400)에 해당할 수 있다. 도 5의 영상 녹화 장치(501)는 도 2의 영상 녹화 장치(201)에 해당할 수 있다.
영상 녹화 장치(201, 501) 및 미디어 중계장치(500)는 방송 제공자가 라이브 방송을 위해 위치하는 장소에 함께 위치하여 방송 현장을 촬영할 수도 있고, 재난 현장, 절벽 등과 같이 방송 제공자가 접근하기 어려운 공간(즉, 방송 제공자와는 다른 장소)에 위치하여 방송하고자 하는 현장을 촬영하여 유선 또는 무선 네트워크를 통해 촬영된 미디어 데이터를 미디어 중계 서버(502)로 전달할 수 있다. 이때, 방송 제공자와 별도의 공간에 위치하는 경우, 영상 녹화 장치(201, 501) 및 미디어 중계장치(500)는 드론 등의 무인 항공기(UAV)에 탑재되어 방송하고자 하는 현장을 촬영할 수 있다.
미디어 중계 장치(500)는 방송 제공자가 소지한 개인용 미디어 중계 장치로서, 방송 제공자가 위치한 공간에 위치할 수 도 있고, 방송 제공자와 다른 장소에 위치할 수도 있다. 미디어 중계 장치(500)는 미디어 중계 장치 환경 설정 수신부(510), 데이터베이스(520) 및 미디어 관리부(530)를 포함할 수 있다.
미디어 중계 장치 환경 설정 수신부(510)는 방송 제공자 단말로부터 라이브 방송 중계를 원하는 SNS 서버의 URL 정보 및 스트림 키(KEY) 정보를 전송받을 수 있다. 이처럼, 방송 제공자 단말을 통해 URL 정보 및 스트림 키 정보를 제공받기 위해 방송 제공자 단말과 미디어 중계 장치(500) 간의 통신 세션 설정 및 정보 송수신을 위한 어플리케이션 또는 상호 연동 프로그램 등이 미리 설치되어 구동될 수 있다.
미디어 중계 장치 환경 설정 수신부(510)는 SNS 서버의 URL 정보 및 스트림 키(KEY) 정보를 데이터베이스(520)에 저장할 수 있으며, 미디어 중계 장치의 동작을 재시작 시 자동으로 미디어 전송 동작을 위해 사용할 수 있다.
미디어 관리부(530)는 방송 제공자가 라이브 방송을 원하는 경우, 영상 녹화 장치(501)로부터 수신되는 미디어 데이터를 중계 서버(520)로 중계 전송할 수 있다. 미디어 관리부(530)는 미디어 데이터의 중계 전송을 위해 미디어 접속/수신부, 미디어 재합성부, 미디어 전송부, 외부 오디오 수신부, 오디오 재생부, 오디오 합성 엔코딩부, 오디오 디코딩부 및 오디오 접속/수신부를 포함할 수 있다.
일례로, 방송 제공자 단말에서 중계서버의 웹사이트에 접속하여 로그인한 후 방송 시작 신호(예컨대, 아이콘 버튼)가 요청되었거나 또는 미디어 중계 장치(500)에 마련된 방송 시작 버튼 등에 방송 시작이 요청된 경우, 미디어 접속/수신부는 영상 녹화 장치(501)에 유/무선 네트워크를 통해 접속하여 영상 녹화 장치(501)에서 촬영된 방송 현장관련 미디어 데이터를 수신할 수 있다. 이때, 미디어 접속/수신부는 RTSP over TCP, RTSP over UDP, UDP unicast, UDP multicast, HLS, RTMP, MPEG TS over TCP, MPEG TS over UDP, RTP 등 영상 녹화 장치에서 지원하는 네트워크 접속 방식으로 미디어 데이터를 영상 녹화 장치(501)로부터 수신할 수 있다. 상기 네트워크 접속 방식은 방송 제공자 단말을 통해 미리 등록될 수 있다.
미디어 접속/수신부는 영상 녹화 장치(501)로부터 수신되는 미디어 데이터 중 영상 데이터(즉, 비디오 데이터)를 미디어 재합성부로 전달할 수 있다. 예컨대, 미디어 데이터는 영상 데이터와 오디오 데이터로 구성되며, 촬영 현장을 촬영한 영상(즉, 이미지)를 나타내는 영상 데이터와 촬영 현장에서 발생하는 현장음을 나타내는 오디오 데이터는 별도로 수신될 수 있다. 이때, 현장음이 없거나, 영상 녹화 장치에 마이크 등이 부재한 경우, 무음의 오디오 데이터가 수신될 수 있다.
그러면, 미디어 접속/수신부는 영상 녹화 장치(501)로부터 수신되는 영상 데이터를 미디어 재합성부로 전달하고, 오디오 데이터는 오디오 합성 엔코딩부를 전달할 수 있다.
외부 오디오 수신부는 유/무선의 외부 마이크 입력을 통해 방송 제공자의 음성에 해당하는 오디오 데이터를 입력받을 수 있다. 예컨대, 마이크는 미디어 중계 장치(500)에 마련될 수도 있고, 원격으로 연결되어 방송 제공자가 얼굴, 머리 등에 착용하고 있을 수도 있다. 그러면, 상기 촬영된 영상과 관련하여 방송 제공자가 말하는 음성이 마이크를 통해 입력되어 외부 오디오 수신부로 전달될 수 있다. 그러면, 외부 오디오 수신부는 수신된 방송 제공자의 음성에 해당하는 오디오 데이터를 오디오 합성 엔코딩부로 전달할 수 있다.
오디오 합성 엔코딩부는 수신된 오디오 데이터와 영상 녹화 장치(501)로부터 수신된 오디오 데이터를 합성할 수 있다. 그리고, 오디오 합성 엔코딩부는 합성된 오디오 데이터를 미리 설정된 오디오 코덱 정보에 기초하여 엔코딩을 수행할 수 있다. 여기서, 오디오 코덱 정보는 방송 제공자 단말을 통해 설정될 수도 있고, 기본값이 미리 설정될 수도 있다. 기본값이 미리 설정된 경우, 방송 제공자 단말을 통해 방송 제공자가 원하는 오디오 코덱 규격으로 상기 오디오 코덱 정보는 수정될 수 있다. 이때, 영상 녹화 장치(501)로부터 수신된 오디오 데이터는 현장음을 포함하는 오디오 데이터일 수도 있고, 무음의 오디오 데이터일 수도 있다.
미디어 재합성부는 오디오 합성 엔코딩부로부터 전달받은 엔코딩된 오디오 데이터와 영상 녹화 장치(501)로부터 수신된 영상 데이터를 재합성하여 미디어 전송부로 전송할 수 있다. 그러면, 미디어 전송부는 재합성된 미디어 데이터, 즉, 영상 녹화 장치(501)에서 촬영된 영상에 방송 제공자의 음성이 반영된 미디어 데이터를 중계 서버(502)로 전송할 수 있다. 여기서, 중계 서버(502)로 전송되는 미디어 데이터는 단일 스트림 형태일 수 있다.
오디오 접속/수신부는 중계 서버(502)에 접속하여 방송 관계자의 음성에 해당하는 오디오 데이터를 중계 서버(502)로부터 수신할 수 있다. 여기서, 방송 관계자의 음성에 해당하는 오디오 데이터는 영상 녹화 장치(501)가 촬영한 현장과 관련된 전문가의 해설, 아나운서의 멘트를 반영한 데이터일 수도 있고, 서로 다른 SNS 서버에 접속한 시청자들이 시청자 단말을 통해 입력한 채팅 내용을 방송 관계자가 "시청자 A님이 오늘 방송 최고 재밌어라고 하십니다" 등을 말한 음성에 해당하는 오디오 데이터를 반영한 데이터일 수도 있다.
오디오 디코딩부는 중계 서버(502)로부터 수신된 오디오 데이터를 디코딩할 수 있다. 그러면, 오디오 재생부는 스피커를 통해 상기 디코딩된 오디오 데이터를 방송 제공자에게 제공할 수 있다. 예컨대, 방송 관계자의 해설, 멘트, 또는 시청자 의견 등이 실시간으로 유/무선의 스피커를 통해 재생되어 방송 제공자에게 제공될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (7)

  1. 다인칭 시점의 미디어 중계를 위한 라이브 방송 제공 방법에 있어서,
    중계 서버가 미디어 중계 장치에 대한 인증을 수행하는 단계;
    상기 인증에 성공하면, 상기 중계 서버가 상기 미디어 중계 장치로부터 영상 녹화 장치에서 촬영된 미디어 데이터를 수신하는 단계;
    상기 중계 서버가 상기 수신된 미디어 데이터를 대상으로 오디오 데이터와 영상 데이터를 분리하는 단계;
    상기 중계 서버가 방송 관계자용 오디오 송출 장치로부터 수신된 오디오 데이터와 상기 분리된 오디오 데이터를 합성하는 단계;
    상기 중계 서버가 상기 합성된 오디오 데이터를 엔코딩(encoding)하는 단계;
    상기 중계 서버가 상기 엔코딩된 오디오 데이터와 상기 영상 데이터를 재합성하여 단일 미디어 스트림을 생성하는 단계; 및
    상기 중계 서버가 상기 단일 미디어 스트림을 라이브 방송하고자 하는 복수의 SNS 서버 각각으로 다중 분배하여 전송하는 단계를 포함하는 라이브 방송 제공 방법.
  2. 제1항에 있어서,
    상기 분리된 오디오 데이터는, 상기 미디어 중계 장치에 마련된 마이크를 통해 수신된 방송 제공자의 오디오 신호와 상기 영상 녹화 장치에서 촬영된 미디어 데이터에 포함된 촬영 현장의 오디오 신호가 합성된 것인 라이브 방송 제공 방법.
  3. 제1항에 있어서,
    상기 중계 서버가 상기 엔코딩된 오디오 데이터를 상기 미디어 중계 장치로 전송하는 단계를 더 포함하는 라이브 방송 제공 방법.
  4. 제1항에 있어서,
    상기 수신된 오디오 데이터와 상기 분리된 오디오 데이터를 합성하는 단계는,
    상기 중계 서버가 상기 수신된 오디오 데이터와 상기 분리된 오디오 데이터를 각각 디코딩(decoding)하는 단계; 및
    상기 디코딩된 오디오 데이터들을 합성하는 단계를 포함하는 라이브 방송 제공 방법.
  5. 제1항에 있어서,
    상기 촬영된 미디어 데이터는, 상기 영상 녹화 장치 및 미디어 중계 장치가 무인 항공기(unmanned aerial vehicles), 무인 지상 차량(unmanned ground vehicles) 및 무인 로봇(unmanned robots)에 탑재되어 현장이 촬영된 것인 라이브 방송 제공 방법.
  6. 제1항에 있어서,
    상기 미디어 중계 장치에 대한 인증을 수행하는 단계는,
    상기 중계 서버가 상기 미디어 중계 장치와 관련하여 미리 등록된 고유 정보 및 방송 제공자의 사용자 정보와 상기 미디어 중계 장치로부터 수신된 고유 정보 및 사용자 정보에 기초하여 상기 미디어 중계 장치에 대한 인증을 수행하는 단계; 및
    상기 인증에 성공하면, 상기 중계 서버가, 상기 방송 제공자가 라이브 방송을 원하는 복수의 SNS 서버의 URL 정보 및 상기 SNS 서버로부터 할당받은 스트림 키(KEY) 정보를 상기 미디어 중계 장치로부터 수신하는 단계; 및
    상기 중계 서버가 상기 수신된 URL 정보 및 스트림 키 정보와 상기 방송 제공자와 관련하여 미리 등록된 URL 정보 및 스트림 키 정보에 기초하여, 상기 미디어 중계 장치로부터 미디어 데이터의 수신 허락을 위한 인증을 수행하는 단계를 포함하는 라이브 방송 제공 방법.
  7. 제6항에 있어서,
    상기 미디어 중계 장치로부터 상기 미디어 데이터를 수신하는 단계는,
    상기 수신 허락을 위한 인증에 성공하면, 상기 중계 서버가 상기 미디어 중계 장치로부터 상기 미디어 데이터를 수신하는 단계를 포함하는 라이브 방송 제공 방법.
KR1020180061650A 2018-05-30 2018-05-30 다인칭 시점의 sns 라이브 방송을 위한 오디오 중계 방법 및 시스템 KR101957807B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180061650A KR101957807B1 (ko) 2018-05-30 2018-05-30 다인칭 시점의 sns 라이브 방송을 위한 오디오 중계 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180061650A KR101957807B1 (ko) 2018-05-30 2018-05-30 다인칭 시점의 sns 라이브 방송을 위한 오디오 중계 방법 및 시스템

Publications (1)

Publication Number Publication Date
KR101957807B1 true KR101957807B1 (ko) 2019-03-14

Family

ID=65759690

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180061650A KR101957807B1 (ko) 2018-05-30 2018-05-30 다인칭 시점의 sns 라이브 방송을 위한 오디오 중계 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR101957807B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021118050A1 (ko) * 2019-12-10 2021-06-17 강동기 하이라이트 영상 자동 편집을 위한 컴퓨터 프로그램
KR20230071407A (ko) * 2021-11-16 2023-05-23 주식회사 엠에이치넷 수중환경 영상 서비스 제공 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100063286A (ko) * 2008-12-03 2010-06-11 에스케이 텔레콤주식회사 다중 영상 방송 시스템, 방법, 단말기 방송 서버, 방송 중계 방법, 방송 수신기, 다중 방송 수신 방법 및 저장 매체
JP2014045384A (ja) * 2012-08-27 2014-03-13 Sharp Corp 中継装置、情報提示方法、制御プログラム、および記録媒体
KR101633901B1 (ko) * 2015-07-23 2016-06-27 유동균 소셜 네트워크를 이용한 라이브 방송서비스 제공 방법
KR20180026745A (ko) * 2016-04-22 2018-03-13 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 게임 생방송 방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100063286A (ko) * 2008-12-03 2010-06-11 에스케이 텔레콤주식회사 다중 영상 방송 시스템, 방법, 단말기 방송 서버, 방송 중계 방법, 방송 수신기, 다중 방송 수신 방법 및 저장 매체
JP2014045384A (ja) * 2012-08-27 2014-03-13 Sharp Corp 中継装置、情報提示方法、制御プログラム、および記録媒体
KR101633901B1 (ko) * 2015-07-23 2016-06-27 유동균 소셜 네트워크를 이용한 라이브 방송서비스 제공 방법
KR20180026745A (ko) * 2016-04-22 2018-03-13 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 게임 생방송 방법 및 장치

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021118050A1 (ko) * 2019-12-10 2021-06-17 강동기 하이라이트 영상 자동 편집을 위한 컴퓨터 프로그램
KR20210073077A (ko) * 2019-12-10 2021-06-18 강동기 하이라이트 영상 자동 편집을 위한 컴퓨터 프로그램
KR102286638B1 (ko) * 2019-12-10 2021-08-05 강동기 하이라이트 영상 자동 편집을 위한 컴퓨터 프로그램
KR20230071407A (ko) * 2021-11-16 2023-05-23 주식회사 엠에이치넷 수중환경 영상 서비스 제공 시스템
KR102611414B1 (ko) 2021-11-16 2023-12-08 주식회사 엠에이치넷 수중환경 영상 서비스 제공 시스템

Similar Documents

Publication Publication Date Title
US6839080B2 (en) Remote server switching of video streams
CN111935443B (zh) 一种视频会议实时直播分享到即时通讯工具的方法和装置
EP2658209B1 (en) Methods and apparatus for streaming audio content
CN107172443A (zh) 视频直播方法、装置和系统
CN106303663B (zh) 直播处理方法和装置、直播服务器
KR101647938B1 (ko) 이동통신망을 통해 이기종 네트워크를 연동하여 미디어 스트리밍을 제공하는 방법 및 시스템
EP1796393A1 (en) Method and system for automatic IP TV program generation
US20170187986A1 (en) Live streaming media method, publish side live, server and terminal
CN112203106B (zh) 直播教学方法、装置、计算机设备和存储介质
CN112135155B (zh) 音视频的连麦合流方法、装置、电子设备及存储介质
CN111092898B (zh) 报文传输方法及相关设备
CN111147362B (zh) 多人即时通讯方法、系统、装置及电子设备
CN110944217A (zh) 直播信息处理方法、装置及服务器、存储介质
KR101957807B1 (ko) 다인칭 시점의 sns 라이브 방송을 위한 오디오 중계 방법 및 시스템
CN106792244A (zh) 视频直播方法及装置
US11070878B2 (en) Method and apparatus for authorizing reception of media programs on a secondary receiver based upon reception of the media program by a primary receiver
US10721500B2 (en) Systems and methods for live multimedia information collection, presentation, and standardization
CN111147789A (zh) 一种音视频流录制的方法、装置、设备以及存储介质
US9363562B1 (en) Method and system for authorizing a user device
KR20200136382A (ko) 정보 처리 장치, 정보 처리 방법, 송신 장치, 및 송신 방법
CN111901537B (zh) 一种基于云平台的广播电视互动节目制作方式
CN112383794A (zh) 直播方法、直播系统、服务器和计算机存储介质
US20130091517A1 (en) Method and apparatus of providing broadcast content and metadata for augmented broadcasting, method and apparatus of providing augmenting content, and method and apparatus of receiving augmented broadcast content
US20120017242A1 (en) Long Distance Audio Attendance
KR101970200B1 (ko) 영상 녹화 장치를 이용하여 복수의 sns 서버로 라이브 방송을 제공하는 방법 및 시스템

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant