KR20150072231A - 멀티 앵글 뷰 서비스 제공 장치 및 방법 - Google Patents

멀티 앵글 뷰 서비스 제공 장치 및 방법 Download PDF

Info

Publication number
KR20150072231A
KR20150072231A KR1020130159658A KR20130159658A KR20150072231A KR 20150072231 A KR20150072231 A KR 20150072231A KR 1020130159658 A KR1020130159658 A KR 1020130159658A KR 20130159658 A KR20130159658 A KR 20130159658A KR 20150072231 A KR20150072231 A KR 20150072231A
Authority
KR
South Korea
Prior art keywords
angle
broadcast
transport stream
content
transmitting
Prior art date
Application number
KR1020130159658A
Other languages
English (en)
Inventor
김태정
김창기
김재호
전주일
유정주
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020130159658A priority Critical patent/KR20150072231A/ko
Priority to US14/573,580 priority patent/US20150181258A1/en
Publication of KR20150072231A publication Critical patent/KR20150072231A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23406—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving management of server-side video buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605—Creation or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64—Addressing
    • H04N21/6405—Multicasting

Abstract

메인 방송 콘텐츠를 메인 단말로 전송하고, 멀티 앵글 콘텐츠를 개인 단말로 전송하도록 한 멀티 앵글 뷰 서비스 제공 장치 및 방법이 제시된다. 제시된 멀티 앵글 뷰 서비스 제공 장치는 복수의 카메라로부터 서로 다른 앵글에서 촬영된 영상을 입력받아 복수의 엘러멘터리 스트림을 생성하는 인코더부; 복수의 엘러멘터리 스트림을 근거로 생성한 방송 콘텐츠를 방송망을 통해 송출하는 방송 송출부; 및 복수의 엘러멘터리 스트림을 근거로 방송 콘텐츠에 해당하는 복수의 멀티 앵글 콘텐츠들을 생성하고, 개인 단말로부터의 요청신호를 근거로 복수의 멀티 앵글 콘텐츠들 중에 하나를 네트워크를 통해 개인 단말에게로 전송하는 멀티 앵글 스트리밍부를 포함한다.

Description

멀티 앵글 뷰 서비스 제공 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING MUTI ANGLE VIEW SERVICE}
본 발명은 멀티 앵글 뷰 서비스 제공 장치 및 방법에 관한 것으로, 더욱 상세하게는 멀티 앵글 영상을 시청자에게 제공하는 멀티 앵글 뷰 서비스 제공 장치 및 방법에 대한 것이다.
TV 방송 프로그램은 하나의 채널을 통해 시청자에게 영상을 제공한다. 이때, 방송국에서는 스포츠, 음악 프로그램, 예능 프로그램 등의 영상을 제공하기 위해 촬영 현장에 복수의 카메라를 여러 각도에 배치하여 촬영한다. 하지만, 시청자들은 복수의 카메라에서 촬영된 영상들 중에서 방송사의 선택에 의해 결정된 하나의 영상만을 시청할 수 있다. 이에, 시청자는 원하는 위치의 화면을 볼 수 없는 문제점이 있다.
이러한 문제점을 해결하기 위해서, IPTV 등에서는 멀티 앵글(Multi Angle) 방송 서비스를 송출한다. 즉, 방송국은 복수의 카메라로 촬영된 영상을 서로 다른 채널을 통해 전송한다. 시청자는 채널 선택을 통해 원하는 앵글의 영상을 시청할 수 있다.
그러나 종래의 멀티 앵글 방송 서비스는 하나의 망을 통해 하나의 단말로 서비스를 제공하기 때문에 지극히 개인형 콘텐츠 소비이며, 화면 전환시 지터 타임(Jitter Time)이 대략 1초 정도 발생하여 화면 및 음성이 끊기는 문제점이 있다.
선행문헌: 한국등록특허 제10-1128848호(명칭: 멀티 앵글 모바일 방송 서비스를 제공하는 서버, 시스템 및 방법)
본 발명은 상기한 종래의 문제점을 해결하기 위해 제안된 것으로, 하이브리드 네트워크를 통해 메인 방송 콘텐츠를 메인 단말로 전송하고, 멀티 앵글 콘텐츠를 개인 단말로 전송하도록 한 멀티 앵글 뷰 서비스 제공 장치 및 방법을 제공하는 것을 목적으로 한다.
상기한 목적을 달성하기 위하여 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 장치는, 복수의 카메라로부터 서로 다른 앵글에서 촬영된 영상을 입력받아 복수의 엘러멘터리 스트림을 생성하는 인코더부; 복수의 엘러멘터리 스트림을 근거로 생성한 방송 콘텐츠를 방송망을 통해 송출하는 방송 송출부; 및 복수의 엘러멘터리 스트림을 근거로 방송 콘텐츠에 해당하는 복수의 멀티 앵글 콘텐츠들을 생성하고, 개인 단말로부터의 요청신호를 근거로 복수의 멀티 앵글 콘텐츠들 중에 하나를 네트워크를 통해 개인 단말에게로 전송하는 멀티 앵글 스트리밍부를 포함한다.
방송 송출부는, 복수의 엘러멘터리 스트림을 패킷화하여 패킷화 엘러멘터리 스트림으로 변환하고, 패킷화 엘러멘터리 스트림을 이송 스트림으로 변환하는 방송 TS-Muxer 모듈; 및 이송 스트림을 방송신호로 변조하여 송출하는 방송망 변조 모듈을 포함한다.
방송 TS-Muxer 모듈은, 인터넷 콘텐츠를 관리하는 IP 주소, 프로그램 ID를 포함하는 메타 데이터를 이송 스트림의 헤더에 삽입한다.
방송 송출부는, 방송 TS-Muxer 모듈에서 변환된 이송 스트림을 저장하고, 지연시간이 경과한 후에 저장된 이송 스트림을 방송망 변조 모듈에게로 전송하는 동기화 버퍼 모듈을 더 포함한다.
방송 송출부는, 방송 콘텐츠 및 멀티 앵글 콘텐츠의 동기화를 위한 프로그램 시각 기준값을 생성하여 멀티 앵글 스트리밍부에게로 전송하는 엔코더 클럭 모듈을 더 포함한다.
멀티 앵글 스트리밍부는, 복수의 엘러멘터리 스트림을 복수의 이송 스트림으로 변환하는 멀티 앵글 TS Muxer 모듈; 멀티 앵글 TS Muxer 모듈에서 변환된 이송 스트림을 설정 사이즈로 분할하여 분할 이송 스트림을 생성하는 MPEG-2 TS 세그먼터 모듈; MPEG-2 TS 세그먼터 모듈에서 분할 이송 스트림을 생성시 생성되는 세그먼트 정보를 근거로 멀티 앵글 콘텐츠의 미디어 프레젠테이션 디스크립션 스키마를 생성하는 확장 MPD 생성 모듈; 및 개인 단말로부터의 요청신호 및 미디어 프레젠테이션 디스크립션 스키마를 근거로 방송 콘텐츠에 해당하는 멀티 앵글 콘텐츠를 검출하고, 네트워크를 통해 멀티 앵글 콘텐츠를 개인 단말에게로 전송하는 멀티 앵글 콘텐츠 처리 모듈을 포함한다.
멀티 앵글 TS Muxer 모듈은, 방송 송출부로부터 전송받은 프로그램 시각 기준값을 근거로 복수의 엘러멘터리 스트림을 복수의 이송 스트림으로 변환한다.
MPEG-2 TS 세그먼터 모듈은, 분할 이송 스트림을 생성시 비디오 코덱 정보, 세그먼트 크기 및 비트율을 포함하는 세그먼트 정보를 생성한다.
확장 MPD 생성 모듈은, 하나의 멀티 앵글 콘텐츠에 대해 Period, Group, Representation, Segment을 포함하는 트리 구조의 미디어 프레젠테이션 디스크립션 스키마를 생성한다.
멀티 앵글 콘텐츠 처리 모듈은, 개인 단말로부터 수신한 프로그램 시각 기준값 및 요청신호와, 미디어 프레젠테이션 디스크립션 스키마를 근거로 멀티 앵글 콘텐츠를 검출한다.
상기한 목적을 달성하기 위하여 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 장치 및 방법는, 인코더부에 의해, 복수의 카메라들로부터 서로 다른 앵글에서 촬영된 영상들을 입력받는 단계; 인코더부에 의해, 영상들을 부호화하여 복수의 엘러멘터리 스트림을 생성하는 단계; 방송 송출부에 의해, 복수의 엘러멘터리 스트림을 근거로 방송 콘텐츠를 송출하는 단계; 멀티 앵글 스트리밍부에 의해, 복수의 엘러멘터리 스트림을 근거로 멀티 앵글 콘텐츠를 생성하는 단계; 및 멀티 앵글 스트리밍부에 의해, 개인 단말로부터 수신한 요청신호를 근거로 네트워크를 통해 멀티 앵글 콘텐츠를 개인 단말에게로 전송하는 단계를 포함한다.
방송 콘텐츠를 송출하는 단계는, 방송 송출부에 의해, 복수의 엘러멘터리 스트림을 패킷화하여 패킷화 엘러멘터리 스트림으로 변환하는 단계; 방송 송출부에 의해, 패킷화 엘러멘터리 스트림을 이송 스트림으로 변환하는 단계; 및 방송 송출부에 의해, 이송 스트림을 방송신호로 변조하여 송출하는 단계를 포함한다.
이송 스트림으로 변환하는 단계에서는, 방송 송출부에 의해, 인터넷 콘텐츠를 관리하는 IP 주소, 프로그램 ID를 포함하는 메타 데이터를 이송 스트림의 헤더에 삽입한다.
방송신호로 변조하여 송출하는 단계에서는, 방송 송출부에 의해, 지연시간이 경과한 후에 이송 스트림을 방송신호로 변조하여 송출한다.
방송 콘텐츠를 송출하는 단계는, 방송 송출부에 의해, 방송 콘텐츠 및 멀티 앵글 콘텐츠의 동기화를 위한 프로그램 시각 기준값을 생성하는 단계; 및 방송 송출부에 의해, 방송신호와 함께 프로그램 시각 기준값을 송출하는 단계를 포함한다.
멀티 앵글 콘텐츠를 생성하는 단계는, 멀티 앵글 스트리밍부에 의해, 복수의 엘러멘터리 스트림을 이송 스트림으로 변환하는 단계; 및 멀티 앵글 스트리밍부에 의해, 이송 스트림을 분할하여 분할 이송 스트림을 생성하는 단계를 포함한다.
이송 스트림으로 변환하는 단계에서는, 멀티 앵글 스트리밍부에 의해, 방송 송출부로부터 전송받은 프로그램 시각 기준값을 근거로 복수의 엘러멘터리 스트림을 복수의 이송 스트림으로 변환한다.
이송 스트림으로 변환하는 단계에서는, 멀티 앵글 스트리밍부에 의해, 비디오 코덱 정보, 세그먼트 크기 및 비트율을 포함하는 세그먼트 정보를 생성한다.
멀티 앵글 콘텐츠를 생성하는 단계는, 멀티 앵글 스트리밍부에 의해, 세그먼트 정보를 근거로 미디어 프레젠테이션 디스크립션 스키마를 생성하는 단계를 더 포함한다.
미디어 프레젠테이션 디스크립션 스키마를 생성하는 단계에서는, 멀티 앵글 스트리밍부에 의해, 하나의 멀티 앵글 콘텐츠에 대해 Period, Group, Representation, Segment을 포함하는 트리 구조의 미디어 프레젠테이션 디스크립션 스키마를 생성한다.
본 발명에 의하면, 멀티 앵글 뷰 서비스 제공 장치 및 방법은 하이브리드 네트워크를 통해 메인 방송 콘텐츠를 메인 단말로 전송하고, 멀티 앵글 콘텐츠를 개인 단말로 전송함으로써, 방송으로는 방송 콘텐츠를 전송하고 사용자가 요청에 따라 인터넷으로 멀티 앵글 뷰를 채널 적응적으로 시청할 수 있는 효과가 있다.
또한, 멀티 앵글 뷰 서비스 제공 장치 및 방법은 하이브리드 네트워크를 통해 메인 방송 콘텐츠를 메인 단말로 전송하고, 멀티 앵글 콘텐츠를 개인 단말로 전송함으로써, 종래의 멀티 앵글 서비스는 각각의 뷰를 선택 시점부터 전송하기 때문에 지터 타임이 발생하는 문제점을 해결할 수 있다. 즉, 멀티 앵글 뷰 서비스 제공 장치 및 방법은 최소 비트율을 갖는 각각의 영상을 전송하고 사용자가 선택한 뷰에 대해서만 채널 적응적으로 전송하기 때문에, 지터 타임 또는 영상이 끊기는 영상 없이 심리스(Seamless)하게 영상을 시청할 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 장치의 멀티 앵글 뷰 서비스 제공을 개략적으로 설명하기 위한 도면.
도 2는 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 장치의 구성을 설명하기 위한 블록도.
도 3은 도 2의 방송 송출부를 설명하기 위한 블록도.
도 4는 도 2의 멀티 앵글 스트리밍부를 설명하기 위한 블록도.
도 5는 도 4의 확장 MPD 생성 모듈을 설명하기 위한 도면.
도 6은 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 방법을 설명하기 위한 흐름도.
도 7은 도 6의 방송 콘텐츠 송출 단계를 설명하기 위한 흐름도.
도 8은 도 6의 멀티 앵글 콘텐츠 생성 단계를 설명하기 위한 흐름도.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여, 본 발명의 가장 바람직한 실시예를 첨부 도면을 참조하여 설명하기로 한다. 우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
이하, 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 장치를 첨부된 도면을 참조하여 상세하게 설명하면 아래와 같다. 도 1은 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 장치의 멀티 앵글 뷰 서비스 제공을 개략적으로 설명하기 위한 도면이다. 도 2는 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 장치의 구성을 설명하기 위한 블록도이다. 도 3은 도 2의 방송 송출부를 설명하기 위한 블록도이고, 도 4는 도 2의 멀티 앵글 스트리밍부를 설명하기 위한 블록도이다. 도 5는 도 4의 확장 MPD 생성 모듈을 설명하기 위한 도면이다.
도 1에 도시된 바와 같이, 멀티 앵글 뷰 서비스 제공 장치(100)는 복수의 카메라(200)로 촬영된 멀티 앵글 영상의 로우 영상(Raw Video)를 입력받는다. 멀티 앵글 뷰 서비스 제공 장치(100)는 통해 멀티 앵글 영상들 중에서 하나의 영상을 선택하여 방송 콘텐츠(예를 들면, MPEG 2-TS(H.264 또는 MPEG 2))로 생성한다. 멀티 앵글 뷰 서비스 제공 장치(100)는 생성된 방송 콘텐츠를 방송망을 통해 시청자의 메인 단말(300)에게로 전송한다. 이때, 멀티 앵글 뷰 서비스 제공 장치(100)는 멀티 앵글 뷰 서비스를 위한 동기화 정보(즉, 프로그램 시각 기준값(PCR; Program Clock Reference))를 방송 콘텐츠와 함께 메인 단말(300)로 전송한다. 이때, 멀티 앵글 뷰 서비스 제공 장치(100)는 방송 콘텐츠(즉, 방송망을 통해 전송되는 콘텐츠)와 멀티 앵글 콘텐츠(즉, 인터넷망, 모바일망을 통해 전송되는 콘텐츠)의 동기를 위해 하나의 클럭 생성기를 이용하여 두 콘텐츠를 동기화한다.
한편, 시청자는 멀티 앵글 뷰 서비스의 이용을 위해 사용자 단말을 통해 메인 단말(300)로부터 수신한 동기화 정보를 멀티 앵글 뷰 서비스 제공 장치(100)에게로 전송한다. 그에 따라, 멀티 앵글 뷰 서비스 제공 장치(100)는 동기화 정보를 근거로 사용자가 선택한 멀티 앵글 영상을 멀티 앵글 콘텐츠(예를 들면, H.264)로 변환하여 네트워크(예를 들면, 인터넷, 모바일 통신망 등)를 통해 사용자 단말에게로 전송한다.
이처럼, 멀티 앵글 뷰 서비스 제공 장치(100)는 방송망, 인터넷, 모바일망 등의 하이브리드 네트워크를 통해 메인 방송 콘텐츠를 메인 단말(300)로 전송하고, 멀티 앵글 콘텐츠를 개인 단말(400)로 전송한다.
이를 위해, 도 2에 도시된 바와 같이, 멀티 앵글 뷰 서비스 제공 장치(100)는 인코더부(120), 방송 송출부(140), 멀티 앵글 스트리밍부(160)를 포함하여 구성된다.
인코더부(120)는 방송국에서 촬영되는 영상을 수집하여 부호화한다. 즉, 인코더부(120)는 방송국에서 복수의 카메라(200)를 이용하여 촬영한 영상들을 입력받는다. 이때, 인코더부(120)는 가공되지 않은 로우 영상을 복수의 카메라(200)로부터 입력받는다. 인코더부(120)는 각각의 영상을 부호화하여 엘러멘터리 스트림(ES; Elementary Stream)들을 생성한다. 인코더부(120)는 생성한 엘러멘터리 스트림들을 방송 송출부(140) 및 멀티 앵글 스트리밍부(160)에게로 전송한다.
방송 송출부(140)는 인코더로부터 수신한 엘러멘터리 스트림(ES)들 중에 하나를 선택하여 방송 콘텐츠로 설정한다. 방송 송출부(140)는 설정된 방송 콘텐츠를 방송망을 통해 시청자의 메인 단말(300)에게로 송출한다. 즉, 방송 송출부(140)는 부호화된 N-개의 콘텐츠를 하나의 방송 프로그램으로 MPEG -2 이송 스트림으로 패캣화하고, 멀티앵글 뷰 서비스를 알리는 기능과 함께 멀티앵글 뷰 스트리밍 서버와 전송 동기를 위한 버퍼 관리를 수행한다. 이를 위해, 도 3에 도시된 바와 같이, 방송 송출부(140)는 방송 TS-Muxer 모듈(142), 동기화 버퍼 모듈(144), 방송망 변조 모듈(146), 엔코더 클럭 모듈(148)을 포함하여 구성된다.
방송 TS-Muxer 모듈(142)은 복수의 엘러멘터리 스트림(ES)을 패킷화하여 패킷화 엘러멘터리 스트림(PES; Packetizer Elementary Stream)으로 변환한다. 방송 TS-Muxer 모듈(142)은 변환한 패킷화 엘러멘터리 스트림을 이송 스트림(TS; Transport Stream)으로 변환한다. 이때, 방송 TS-Muxer 모듈(142)은 이송 스트림에 메타 데이터를 삽입한다. 여기서, 메타 데이터는 인터넷 콘텐츠를 관리하는 IP 주소, 프로그램 ID를 포함하며, 이송 스트림의 헤더에 삽입된다. 방송 TS-Muxer 모듈(142)은 변환한 이송 스트림을 동기화 버퍼 모듈(144)에게로 전송한다.
동기화 버퍼 모듈(144)은 멀티 앵글 스트리밍부(160)의 멀티 영상 콘텐츠와의 동기화를 위해 지연시간을 지연하여 방송 콘텐츠(즉, 이송 스트림)를 전송한다. 이때, 지연시간은 장치에 미리 설정되어 고정된 값이며, 장치의 성능에 따라 다르게 설정될 수 있다. 여기서, 지연시간은 멀티 앵글 스트리밍부(160)에서 엘러멘터리 스트림을 수신하여 이송 스트림로 변환한 후 세그멘테이션을 완료하는 시간만큼의 고정 지연시간으로 설정된다.
방송망 변조 모듈(146)은 동기화 버퍼 모듈(144)에서 지연 전송된 방송 콘텐츠를 케이블 방송 또는 지상파 방송을 위한 신호로 변조한다. 이때, 방송망 변조 모듈(146)은 기존의 TV 전송 시스템과 동일한 방법으로 방송 콘텐츠를 변조하여 송출한다.
엔코더 클럭 모듈(148)은 방송 콘텐츠와 멀티 앵글 콘텐츠의 동기화를 위한 클럭을 생성한다. 즉, 엔코더 클럭 모듈(148)은 방송 콘텐츠와 멀티 앵글 콘텐츠의 동기화를 위해 프로그램 시각 기준값(PCR)을 생성하여 멀티 앵글 스트리밍부(160)에게로 전송한다. 이때, 엔코더 클럭 모듈(148)은 대략 27㎒ 정도의 단위로 클럭을 생성한다.
멀티 앵글 스트리밍부(160)는 인코더로부터 수신한 엘러멘터리 스트림(ES)들 각각을 멀티 앵글 콘텐츠로 설정한다. 멀티 앵글 스트리밍부(160)는 시청자의 개인 단말(400)로부터 요청된 멀티 앵글 콘텐츠를 네트워크(즉, 인터넷, 모바일망)를 통해 개인 단말(400)에게로 전송한다. 멀티 앵글 스트리밍부(160)는 복수의 멀티 앵글 콘텐츠를 최소 비트율로 압축된 영상으로 변환하여 최소전송하고, 사용자가 선택한 뷰(즉, 앵글)에 대해서는 채널 적응적으로 전송한다. 이를 위해, 도 4에 도시된 바와 같이, 멀티 앵글 스트리밍부(160)는 멀티 앵글 TS Muxer 모듈(162), MPEG-2 TS 세그먼터 모듈(164), 확장 MPD 생성 모듈(166), 멀티 앵글 콘텐츠 처리 모듈(168)을 포함하여 구성된다.
멀티 앵글 TS Muxer 모듈(162)은 인코로부터 수신한 복수의 엘러멘터리 스트림(ES)을 복수의 이송 스트림(TS)로 변환한다. 이때, 멀티 앵글 TS Muxer 모듈(162)은 방송 송출부(140)로부터 수신한 프로그램 시각 기준값을 근거로 엘러멘터리 스트림(ES)을 이송 스트림(TS)으로 변환한다. 멀티 앵글 TS Muxer 모듈(162)은 변환한 복수의 이송 스트림(TS)을 MPEG-2 TS 세그먼터 모듈(164)에게로 전송한다.
MPEG-2 TS 세그먼터 모듈(164)은 멀티 앵글 TS Muxer 모듈(162)로부터 수신한 복수의 이송 스트림(TS)을 설정사이즈로 분할하여 분할 이송 스트림(STS; Segmented Transfer Stream)을 생성한다. 즉, MPEG-2 TS 세그먼터 모듈(164)은 각각 앵글에 해당하는 이송 스트림을 네트워크(즉, 인터넷망, 모바일망 등)를 통해 스트리밍하기 위해 설정사이즈로 분할한다. 이때, MPEG-2 TS 세그먼터 모듈(164)은 원할한 스위칭 기능을 위해 IDR(Instantaneous Decoding Refresh) 단위로 이송 스트림(TS)를 분할한다. 물론, MPEG-2 TS 세그먼터 모듈(164)은 네트워크에서 스트리밍을 위해 요구되는 최소 사이즈 또는 공급자가 설정한 사이즈로 이송 스트림을 분할할 수도 있다. MPEG-2 TS 세그먼터 모듈(164)은 생성한 분할 이송 스트림을 멀티 앵글 콘텐츠 처리 모듈(168)에게로 전송한다.
MPEG-2 TS 세그먼터 모듈(164)은 이송 스트림의 분할 과정에서 필요한 세그먼트 정보를 확장 MPD 생성 모듈(166)에게로 전송한다. 즉, MPEG-2 TS 세그먼터 모듈(164)은 비디오 코덱 정보, 세그먼트 크기, 비트율 등을 포함하는 세그먼트 정보를 확장 MPD 생성 모듈(166)에게로 전송한다.
확장 MPD 생성 모듈(166)은 MPEG-2 TS 세그먼터 모듈(164)로부터 수신한 세그먼트 정보를 근거로 멀티 앵글 콘텐츠의 미디어 프레젠테이션 디스크립션 스키마(MPD(Media Presentation Description) Schema, 이하, MPD Schema)를 생성한다. 즉, 확장 MPD 생성 모듈(166)은 멀티 앵글 콘텐츠의 서비스를 위해 부가데이터인 MPD Schema를 생성한다. 확장 MPD 생성 모듈(166)은 생성한 MPD Schema를 멀티 앵글 콘텐츠 처리 모듈(168)에게로 전송한다. 이때, 도 4에 도시된 바와 같이, 확장 MPD 생성 모듈(166)은 하나의 영상(즉, 멀티 앵글 콘텐츠)에 대해 Period, Group, Representation, Segment을 포함하는 트리 구조의 MPD Schema를 생성한다. 즉, 하나의 영상에 대해 하나의 Period가 존재한다. Period는 영상에 포함된 멀티 앵글 콘텐츠의 갯수에 대응되는 Group들을 포함한다. 각각의 Group은 복수의 Representation들을 포함하며, 하나의 Representation는 복수의 Segment들을 포함한다.
멀티 앵글 콘텐츠 처리 모듈(168)은 시청자의 개인 단말(400)로부터 요청된 멀티 앵글 콘텐츠를 네트워크를 통해 개인 단말(400)에게로 전송한다. 즉, 개인 단말(400)은 메인 단말(300)로부터 현재 방송중인 방송 콘텐츠의 프로그램 시각 기준값을 전송받는다. 개인 단말(400)을 수신한 프로그램 시각 기준값과 함께 멀티 앵글 콘텐츠 요청신호(즉, 시청을 원하는 멀티 앵글 포함)를 멀티 앵글 콘텐츠 처리 모듈(168)에게로 전송한다. 그에 따라, 멀티 앵글 콘텐츠 처리 모듈(168)은 확장 MPD 생성 모듈(166)로부터 수신한 MPD Schema, 개인 단말(400)로부터 수신한 프로그램 시각 기준값 및 요청신호를 근거로 멀티 앵글 콘텐츠를 네트워크를 통해 개인 단말(400)에게로 전송한다.
이하, 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 방법을 첨부된 도면을 참조하여 상세하게 설명하면 아래와 같다. 도 6은 본 발명의 실시예에 따른 멀티 앵글 뷰 서비스 제공 방법을 설명하기 위한 흐름도이다. 도 7은 도 6의 방송 콘텐츠 송출 단계를 설명하기 위한 흐름도이고, 도 8은 도 6의 멀티 앵글 콘텐츠 생성 단계를 설명하기 위한 흐름도이다.
인코더부(120)는 복수의 카메라(200)에서 촬영된 로우 영상들을 입력받는다(S100). 즉, 인코더부(120)는 방송국에 배치된 카메라(200)들로부터 서로 다른 앵글에서 촬영된 영상을 입력받는다. 이때, 인코더부(120)는 각각의 카메라(200)들로부터 가공되지 않은 형태인 로우 영상을 입력받는다.
인코더부(120)는 수신한 로우 영상들을 부호화하여 복수의 엘러멘터리 스트림(ES)를 생성한다(S200). 인코더부(120)는 생성한 엘러멘터리 스트림들을 방송 송출부(140) 및 멀티 앵글 스트리밍부(160)에게로 전송한다.
방송 송출부(140)는 복수의 엘러멘터리 스트림(ES)을 근거로 방송 콘텐츠를 송출한다(S300). 이때, 방송 송출부(140)는 인코더로부터 수신한 엘러멘터리 스트림(ES)들 중에 하나를 선택하여 방송 콘텐츠로 설정한다. 방송 송출부(140)는 설정된 방송 콘텐츠를 방송망을 통해 시청자의 메인 단말(300)에게로 송출한다. 이를 첨부된 도 7을 참조하여 더욱 상세하게 설명하면 아래와 같다.
방송 송출부(140)는 복수의 엘러멘터리 스트림을 패킷화하여 패킷화 엘러멘터리 스트림으로 변환한다(S310).
방송 송출부(140)는 생성한 패킷화 엘레멘터리 스트림을 이송 스트림으로 변환하여 저장한다(S330). 즉, 방송 송출부(140)는 패킷화 엘레멘터리 스트림을 이송 스트림으로 변환한다. 방송 송출부(140)는 인터넷 콘텐츠를 관리하는 IP 주소, 프로그램 ID를 포함하는 메타 데이터를 변화한 이송 스트림의 헤더에 삽입한다. 방송 송출부(140)는 메타 데이터를 삽입한 이송 스트림을 버퍼에 저장한다.
방송 송출부(140)는 프로그램 시각 기준값을 생성한다(S350). 즉, 방송 송출부(140)는 멀티 앵글 콘텐츠의 동기화를 위한 클럭인 프로그램 시각 기준값을 생성한다.
지연시간이 경과하면(S370; 예), 방송 송출부(140)는 이송 스트림을 프로그램 시각 기준값과 함께 송출한다(S390). 즉, 방송 송출부(140)는 방송 콘텐츠와 멀티 영상 콘텐츠의 동기화를 위해 지연시간을 지연하여 방송 콘텐츠를 송출한다. 이때, 지연시간은 장치에 미리 설정되어 고정된 값이며, 장치의 성능에 따라 다르게 설정될 수 있다. 여기서, 방송 송출부(140)는 방송 콘텐츠(즉, 이송 스트림)을 케이블 방송 또는 지상파 방송을 위한 방송 신호로 변조하여 송출한다.
한편, 멀티 앵글 스트리밍부(160)는 복수의 엘러멘터리 스트림들을 근거로 멀티 앵글 콘텐츠를 생성한다(S400). 이를 첨부된 도 8을 참조하여 더욱 상세하게 설명하면 아래와 같다.
멀티 앵글 스트리밍부(160)는 복수의 엘러멘터리 스트림을 이송 스트림으로 변환한다(S420). 즉, 멀티 앵글 스트리밍부(160)는 방송 송출부(140)로부터 수신한 프로그램 시각 기준값을 근거로 엘러멘터리 스트림(ES)을 이송 스트림(TS)으로 변환한다.
멀티 앵글 스트리밍부(160)는 이송 스트림을 분할하여 분할 이송 스트림을 생성한다(S440).
멀티 앵글 스트리밍부(160)는 이송 스트림(TS)을 설정사이즈로 분할하여 분할 이송 스트림(STS; Segmented Transfer Stream)을 생성한다. 즉, 멀티 앵글 스트리밍부(160)는 각각 앵글에 해당하는 이송 스트림을 네트워크(즉, 인터넷망, 모바일망 등)를 통해 스트리밍하기 위해 설정사이즈로 분할한다. 이때, 멀티 앵글 스트리밍부(160)는 원할한 스위칭 기능을 위해 IDR(Instantaneous Decoding Refresh) 단위로 이송 스트림(TS)를 분할한다. 물론, 멀티 앵글 스트리밍부(160)는 네트워크에서 스트리밍을 위해 요구되는 최소 사이즈 또는 공급자가 설정한 사이즈로 이송 스트림을 분할할 수도 있다.
멀티 앵글 스트리밍부(160)는 세그먼트 정보를 근거로 미디어 프레젠테이션 디스크립션 스키마를 생성한다(S460). 즉, 멀티 앵글 스트리밍부(160)는 이송 스트림의 분할 과정에서 필요한 세그먼트 정보를 근거로 미디어 프레젠테이션 디스크립션 스키마를 생성한다. 이때, 세그먼트 정보는 비디오 코덱 정보, 세그먼트 크기, 비트율 등을 포함한다. 여기서, 멀티 앵글 스트리밍부(160)는 하나의 영상(즉, 멀티 앵글 콘텐츠)에 대해 Period, Group, Representation, Segment을 포함하는 트리 구조의 미디어 프레젠테이션 디스크립션 스키마를 생성한다.
개인 단말(400)로부터 멀티 앵글 콘텐츠의 요청신호를 수신하면(S500; 예), 멀티 앵글 스트리밍부(160)는 요청신호를 근거로 멀티 앵글 콘텐츠를 개인 단말(400)에게로 전송한다(S600). 개인 단말(400)은 메인 단말(300)로부터 현재 방송중인 방송 콘텐츠의 프로그램 시각 기준값을 전송받는다. 개인 단말(400)을 수신한 프로그램 시각 기준값과 함께 멀티 앵글 콘텐츠 요청신호(즉, 시청을 원하는 멀티 앵글 포함)를 멀티 앵글 스트리밍부(160)에게로 전송한다. 그에 따라, 멀티 앵글 스트리밍부(160)는 MPD Schema, 개인 단말(400)로부터 수신한 프로그램 시각 기준값 및 요청신호를 근거로 멀티 앵글 콘텐츠를 네트워크를 통해 개인 단말(400)에게로 전송한다.
상술한 바와 같이, 멀티 앵글 뷰 서비스 제공 장치 및 방법은 하이브리드 네트워크를 통해 메인 방송 콘텐츠를 메인 단말로 전송하고, 멀티 앵글 콘텐츠를 개인 단말로 전송함으로써, 방송으로는 방송 콘텐츠를 전송하고 사용자가 요청에 따라 인터넷으로 멀티 앵글 뷰를 채널 적응적으로 시청할 수 있는 효과가 있다.
또한, 멀티 앵글 뷰 서비스 제공 장치 및 방법은 하이브리드 네트워크를 통해 메인 방송 콘텐츠를 메인 단말로 전송하고, 멀티 앵글 콘텐츠를 개인 단말로 전송함으로써, 종래의 멀티 앵글 서비스는 각각의 뷰를 선택 시점부터 전송하기 때문에 지터 타임이 발생하는 문제점을 해결할 수 있다. 즉, 멀티 앵글 뷰 서비스 제공 장치 및 방법은 최소 비트율을 갖는 각각의 영상을 전송하고 사용자가 선택한 뷰에 대해서만 채널 적응적으로 전송하기 때문에, 지터 타임 또는 영상이 끊기는 영상 없이 심리스(Seamless)하게 영상을 시청할 수 있는 효과가 있다.
이상에서 본 발명에 따른 바람직한 실시예에 대해 설명하였으나, 다양한 형태로 변형이 가능하며, 본 기술분야에서 통상의 지식을 가진자라면 본 발명의 특허청구범위를 벗어남이 없이 다양한 변형예 및 수정예를 실시할 수 있을 것으로 이해된다.
100: 멀티 앵글 뷰 서비스 제공 장치 120: 인코더부
140: 방송 송출부 142: 방송 TS-Muxer 모듈
144: 동기화 버퍼 모듈 146: 방송망 변조 모듈
148: 엔코더 클럭 모듈 160: 멀티 앵글 스트리밍부
162: 멀티 앵글 TS Muxer 모듈 164: MPEG-2 TS 세그먼터 모듈
166: 확장 MPD 생성 모듈 168: 멀티 앵글 콘텐츠 처리 모듈
200: 카메라 300: 메인 단말
400: 개인 단말

Claims (20)

  1. 복수의 카메라로부터 서로 다른 앵글에서 촬영된 영상을 입력받아 복수의 엘러멘터리 스트림을 생성하는 인코더부;
    상기 복수의 엘러멘터리 스트림을 근거로 생성한 방송 콘텐츠를 방송망을 통해 송출하는 방송 송출부; 및
    상기 복수의 엘러멘터리 스트림을 근거로 상기 방송 콘텐츠에 해당하는 복수의 멀티 앵글 콘텐츠들을 생성하고, 개인 단말로부터의 요청신호를 근거로 상기 복수의 멀티 앵글 콘텐츠들 중에 하나를 네트워크를 통해 상기 개인 단말에게로 전송하는 멀티 앵글 스트리밍부를 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  2. 청구항 1에 있어서,
    상기 방송 송출부는,
    상기 복수의 엘러멘터리 스트림을 패킷화하여 패킷화 엘러멘터리 스트림으로 변환하고, 상기 패킷화 엘러멘터리 스트림을 이송 스트림으로 변환하는 방송 TS-Muxer 모듈; 및
    상기 이송 스트림을 방송신호로 변조하여 송출하는 방송망 변조 모듈을 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  3. 청구항 2에 있어서,
    상기 방송 TS-Muxer 모듈은,
    인터넷 콘텐츠를 관리하는 IP 주소, 프로그램 ID를 포함하는 메타 데이터를 상기 이송 스트림의 헤더에 삽입하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  4. 청구항 2에 있어서,
    상기 방송 송출부는,
    상기 방송 TS-Muxer 모듈에서 변환된 이송 스트림을 저장하고, 지연시간이 경과한 후에 상기 저장된 이송 스트림을 상기 방송망 변조 모듈에게로 전송하는 동기화 버퍼 모듈을 더 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  5. 청구항 2에 있어서,
    상기 방송 송출부는,
    상기 방송 콘텐츠 및 멀티 앵글 콘텐츠의 동기화를 위한 프로그램 시각 기준값을 생성하여 상기 멀티 앵글 스트리밍부에게로 전송하는 엔코더 클럭 모듈을 더 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  6. 청구항 1에 있어서,
    상기 멀티 앵글 스트리밍부는,
    상기 복수의 엘러멘터리 스트림을 복수의 이송 스트림으로 변환하는 멀티 앵글 TS Muxer 모듈;
    상기 멀티 앵글 TS Muxer 모듈에서 변환된 이송 스트림을 설정 사이즈로 분할하여 분할 이송 스트림을 생성하는 MPEG-2 TS 세그먼터 모듈;
    상기 MPEG-2 TS 세그먼터 모듈에서 분할 이송 스트림을 생성시 생성되는 세그먼트 정보를 근거로 멀티 앵글 콘텐츠의 미디어 프레젠테이션 디스크립션 스키마를 생성하는 확장 MPD 생성 모듈; 및
    개인 단말로부터의 요청신호 및 상기 미디어 프레젠테이션 디스크립션 스키마를 근거로 방송 콘텐츠에 해당하는 멀티 앵글 콘텐츠를 검출하고, 네트워크를 통해 상기 멀티 앵글 콘텐츠를 상기 개인 단말에게로 전송하는 멀티 앵글 콘텐츠 처리 모듈을 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  7. 청구항 6에 있어서,
    상기 멀티 앵글 TS Muxer 모듈은,
    상기 방송 송출부로부터 전송받은 프로그램 시각 기준값을 근거로 상기 복수의 엘러멘터리 스트림을 복수의 이송 스트림으로 변환하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  8. 청구항 6에 있어서,
    상기 MPEG-2 TS 세그먼터 모듈은,
    분할 이송 스트림을 생성시 비디오 코덱 정보, 세그먼트 크기 및 비트율을 포함하는 세그먼트 정보를 생성하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  9. 청구항 6에 있어서,
    상기 확장 MPD 생성 모듈은,
    하나의 멀티 앵글 콘텐츠에 대해 Period, Group, Representation, Segment을 포함하는 트리 구조의 미디어 프레젠테이션 디스크립션 스키마를 생성하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  10. 청구항 6에 있어서,
    상기 멀티 앵글 콘텐츠 처리 모듈은,
    상기 개인 단말로부터 수신한 프로그램 시각 기준값 및 요청신호와, 미디어 프레젠테이션 디스크립션 스키마를 근거로 멀티 앵글 콘텐츠를 검출하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 장치.
  11. 인코더부에 의해, 복수의 카메라들로부터 서로 다른 앵글에서 촬영된 영상들을 입력받는 단계;
    상기 인코더부에 의해, 상기 영상들을 부호화하여 복수의 엘러멘터리 스트림을 생성하는 단계;
    방송 송출부에 의해, 상기 복수의 엘러멘터리 스트림을 근거로 방송 콘텐츠를 송출하는 단계;
    멀티 앵글 스트리밍부에 의해, 상기 복수의 엘러멘터리 스트림을 근거로 멀티 앵글 콘텐츠를 생성하는 단계; 및
    상기 멀티 앵글 스트리밍부에 의해, 개인 단말로부터 수신한 요청신호를 근거로 네트워크를 통해 멀티 앵글 콘텐츠를 상기 개인 단말에게로 전송하는 단계를 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  12. 청구항 11에 있어서,
    상기 방송 콘텐츠를 송출하는 단계는,
    상기 방송 송출부에 의해, 상기 복수의 엘러멘터리 스트림을 패킷화하여 패킷화 엘러멘터리 스트림으로 변환하는 단계;
    상기 방송 송출부에 의해, 상기 패킷화 엘러멘터리 스트림을 이송 스트림으로 변환하는 단계; 및
    상기 방송 송출부에 의해, 상기 이송 스트림을 방송신호로 변조하여 송출하는 단계를 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  13. 청구항 12에 있어서,
    상기 이송 스트림으로 변환하는 단계에서는,
    상기 방송 송출부에 의해, 인터넷 콘텐츠를 관리하는 IP 주소, 프로그램 ID를 포함하는 메타 데이터를 상기 이송 스트림의 헤더에 삽입하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  14. 청구항 12에 있어서,
    상기 방송신호로 변조하여 송출하는 단계에서는,
    상기 방송 송출부에 의해, 지연시간이 경과한 후에 상기 이송 스트림을 방송신호로 변조하여 송출하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  15. 청구항 12에 있어서,
    상기 방송 콘텐츠를 송출하는 단계는,
    상기 방송 송출부에 의해, 상기 방송 콘텐츠 및 멀티 앵글 콘텐츠의 동기화를 위한 프로그램 시각 기준값을 생성하는 단계; 및
    상기 방송 송출부에 의해, 상기 방송신호와 함께 상기 프로그램 시각 기준값을 송출하는 단계를 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  16. 청구항 11에 있어서,
    상기 멀티 앵글 콘텐츠를 생성하는 단계는,
    상기 멀티 앵글 스트리밍부에 의해, 상기 복수의 엘러멘터리 스트림을 이송 스트림으로 변환하는 단계; 및
    상기 멀티 앵글 스트리밍부에 의해, 상기 이송 스트림을 분할하여 분할 이송 스트림을 생성하는 단계를 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  17. 청구항 16에 있어서,
    상기 이송 스트림으로 변환하는 단계에서는,
    상기 멀티 앵글 스트리밍부에 의해, 상기 방송 송출부로부터 전송받은 프로그램 시각 기준값을 근거로 상기 복수의 엘러멘터리 스트림을 복수의 이송 스트림으로 변환하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  18. 청구항 16에 있어서,
    상기 이송 스트림으로 변환하는 단계에서는,
    상기 멀티 앵글 스트리밍부에 의해, 비디오 코덱 정보, 세그먼트 크기 및 비트율을 포함하는 세그먼트 정보를 생성하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  19. 청구항 16에 있어서,
    상기 멀티 앵글 콘텐츠를 생성하는 단계는,
    상기 멀티 앵글 스트리밍부에 의해, 세그먼트 정보를 근거로 미디어 프레젠테이션 디스크립션 스키마를 생성하는 단계를 더 포함하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
  20. 청구항 19에 있어서,
    상기 미디어 프레젠테이션 디스크립션 스키마를 생성하는 단계에서는,
    상기 멀티 앵글 스트리밍부에 의해, 하나의 멀티 앵글 콘텐츠에 대해 Period, Group, Representation, Segment을 포함하는 트리 구조의 미디어 프레젠테이션 디스크립션 스키마를 생성하는 것을 특징으로 하는 멀티 앵글 뷰 서비스 제공 방법.
KR1020130159658A 2013-12-19 2013-12-19 멀티 앵글 뷰 서비스 제공 장치 및 방법 KR20150072231A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130159658A KR20150072231A (ko) 2013-12-19 2013-12-19 멀티 앵글 뷰 서비스 제공 장치 및 방법
US14/573,580 US20150181258A1 (en) 2013-12-19 2014-12-17 Apparatus and method for providing multi-angle viewing service

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130159658A KR20150072231A (ko) 2013-12-19 2013-12-19 멀티 앵글 뷰 서비스 제공 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20150072231A true KR20150072231A (ko) 2015-06-29

Family

ID=53401551

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130159658A KR20150072231A (ko) 2013-12-19 2013-12-19 멀티 앵글 뷰 서비스 제공 장치 및 방법

Country Status (2)

Country Link
US (1) US20150181258A1 (ko)
KR (1) KR20150072231A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017142175A1 (ko) * 2016-02-19 2017-08-24 서울과학기술대학교 산학협력단 자유 시점 방송의 송수신 장치 및 방법
KR20180090719A (ko) * 2017-02-03 2018-08-13 한국과학기술원 미디어 동기화 방법 및 시스템
US10341672B2 (en) 2017-02-03 2019-07-02 Korea Advanced Institute Of Science And Technology Method and system for media synchronization

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014212456A (ja) * 2013-04-18 2014-11-13 ソニー株式会社 送信装置、メタファイル送信方法、受信装置および受信処理方法
US9554160B2 (en) * 2015-05-18 2017-01-24 Zepp Labs, Inc. Multi-angle video editing based on cloud video sharing
US20160378747A1 (en) * 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
EP3386193A1 (en) * 2017-04-04 2018-10-10 Thomson Licensing Method of delivery of audiovisual content and corresponding device
CN108882018B (zh) 2017-05-09 2020-10-20 阿里巴巴（中国）有限公司 虚拟场景中的视频播放、数据提供方法、客户端及服务器
CN108933920B (zh) * 2017-05-25 2023-02-17 中兴通讯股份有限公司 一种视频画面的输出、查看方法及装置
US10911512B2 (en) * 2017-09-05 2021-02-02 Amazon Technologies, Inc. Personalized content streams using aligned encoded content segments
CN109151339B (zh) * 2018-08-27 2021-08-13 武汉有文心文化传媒有限公司 推介视频中人物合成方法及相关产品
CN111669568A (zh) * 2019-03-07 2020-09-15 阿里巴巴集团控股有限公司 多角度自由视角交互方法及装置、介质、终端、设备
CN113794844B (zh) * 2021-09-09 2023-05-26 北京字节跳动网络技术有限公司 自由视角视频采集系统、方法、装置、服务器和介质
CN115243030B (zh) * 2022-06-14 2024-03-01 天翼数字生活科技有限公司 一种终端能力测试系统、方法、设备和存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070103558A1 (en) * 2005-11-04 2007-05-10 Microsoft Corporation Multi-view video delivery
JP2014534695A (ja) * 2011-10-13 2014-12-18 サムスン エレクトロニクス カンパニー リミテッド コンテンツディスプレイ方法、コンテンツ同期化方法、放送コンテンツディスプレイ方法及びディスプレイ装置
US9118950B2 (en) * 2011-10-26 2015-08-25 Panasonic Intellectual Property Corporation Of America Broadcast receiving apparatus, playback apparatus, broadcast communication system, broadcast receiving method, playback method, and program
WO2013152800A1 (en) * 2012-04-13 2013-10-17 Telefonaktiebolaget L M Ericsson (Publ) An improved method and apparatus for processing multistream content
US20150101004A1 (en) * 2012-06-22 2015-04-09 Sony Corporation Receiver apparatus and synchronization processing method thereof

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017142175A1 (ko) * 2016-02-19 2017-08-24 서울과학기술대학교 산학협력단 자유 시점 방송의 송수신 장치 및 방법
KR20180090719A (ko) * 2017-02-03 2018-08-13 한국과학기술원 미디어 동기화 방법 및 시스템
US10341672B2 (en) 2017-02-03 2019-07-02 Korea Advanced Institute Of Science And Technology Method and system for media synchronization

Also Published As

Publication number Publication date
US20150181258A1 (en) 2015-06-25

Similar Documents

Publication Publication Date Title
KR20150072231A (ko) 멀티 앵글 뷰 서비스 제공 장치 및 방법
US20200288182A1 (en) Transmission device, transmission method, receiving device, and receiving method for rendering a multi-image-arrangement distribution service
US20190141373A1 (en) Spatially-Segmented Content Delivery
JP6807852B2 (ja) Ｌｃｔに基づくｄａｓｈフォーマットを有するファイルフォーマットベースのストリーミング
EP2997736B1 (en) Adaptive streaming transcoder synchronization
US10009660B2 (en) Media content transceiving method and transceiving apparatus using same
US9781188B2 (en) Method for transreceiving media content and device for transreceiving using same
EP2690876A2 (en) Heterogeneous network-based linked broadcast content transmitting/receiving device and method
US20140002598A1 (en) Transport system and client system for hybrid 3d content service
KR20170130883A (ko) 하이브리드 망 기반의 가상 현실 방송 서비스 방법 및 장치
KR101081485B1 (ko) 아이피티브이를 이용하여 커뮤니케이션 서비스를 제공하는 방법 및 장치
KR20180000320A (ko) 하이브리드 방송 서비스를 위한 타임드 메타데이터 송신 방법 및 장치
KR100950771B1 (ko) 방송 신호의 송신 및 수신 방법
KR101111389B1 (ko) 인터넷과 온에어를 통한 미디어 컨텐츠 분할 전송 시스템 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application