KR102376204B1 - 분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램 및 콘텐츠 분배 시스템 - Google Patents

분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램 및 콘텐츠 분배 시스템 Download PDF

Info

Publication number
KR102376204B1
KR102376204B1 KR1020197004218A KR20197004218A KR102376204B1 KR 102376204 B1 KR102376204 B1 KR 102376204B1 KR 1020197004218 A KR1020197004218 A KR 1020197004218A KR 20197004218 A KR20197004218 A KR 20197004218A KR 102376204 B1 KR102376204 B1 KR 102376204B1
Authority
KR
South Korea
Prior art keywords
distribution
roi
segment
segment file
broadcast
Prior art date
Application number
KR1020197004218A
Other languages
English (en)
Other versions
KR20190042568A (ko
Inventor
야스아키 야마기시
가즈히코 다카바야시
Original Assignee
소니그룹주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니그룹주식회사 filed Critical 소니그룹주식회사
Publication of KR20190042568A publication Critical patent/KR20190042568A/ko
Application granted granted Critical
Publication of KR102376204B1 publication Critical patent/KR102376204B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/20Arrangements for broadcast or distribution of identical information via plural systems
    • H04H20/24Arrangements for distribution of identical information via broadcast system and non-broadcast system
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/28Arrangements for simultaneous broadcast of plural pieces of information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/86Arrangements characterised by the broadcast information itself
    • H04H20/93Arrangements characterised by the broadcast information itself which locates resources of other pieces of information, e.g. URL [Uniform Resource Locator]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/42Arrangements for resource management

Abstract

본 기술은, 방송 분배 또는 인터넷 분배 중 적어도 한쪽에 의해 분배되는 영상의 ROI 식별자를 시그널링할 수 있도록 하는 분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램, 및 콘텐츠 분배 시스템에 관한 것이다. 본 기술의 제1 측면인 분배 장치는, 복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와, 상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와, 상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부를 구비한다. 본 기술은, DASH를 사용한 스트리밍 분배에 적용할 수 있다.

Description

분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램 및 콘텐츠 분배 시스템
본 기술은, 분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램 및 콘텐츠 분배 시스템에 관한 것으로, 특히 보다 많은 유저에게 시청될 가능성이 높은 등의 우선도가 높은 화상 영역을 방송으로 분배하고, 그 밖의 화상 영역을 온디맨드 분배하는 경우에 사용하기에 적합한 분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램, 및 콘텐츠 분배 시스템에 관한 것이다.
IPTV 등의 인터넷 스트리밍에 있어서의 표준화의 흐름으로서, HTTP 스트리밍에 의한 VoD(Video on Demand) 스트리밍이나, 라이브 스트리밍 등에 적용되는 방식의 표준화가 행해지고 있고, 특히 ISO/IEC/MPEG에 의해 표준화가 행해진 DASH(Dynamic Adaptive Streaming over HTTP)가 주목받고 있다(예를 들어, 비특허문헌 1을 참조).
당해 DASH의 유스케이스로서, 촬상 공간을 복수의 직사각형 영역으로 분할하여 촬상하고, 각 직사각형 영역의 영상 각각을 DASH의 AdaptationSet에 할당하여 자유 시점 스트리밍 서비스를 제공하는 것을 고려한다.
당해 자유 시점 스트리밍 서비스를 방송 분배와 온디맨드 분배(이하, 인터넷 분배라고도 칭함)를 조합하여 실현하는 경우, 수많은 엔드 유저(수신 장치의 유저)가 공통적으로 시청할 가능성이 높은 영상의 스트림을 방송 분배에 의해 제공하고, 수많은 유저가 공통적으로 시청할 가능성이 낮은 영상의 스트림을 인터넷 분배에 의해 제공하도록 하면, 분배 리소스의 유효 이용을 도모할 수 있다.
여기서, 수많은 유저가 공통적으로 시청할 가능성이 높은 영상이란, 촬상 범위 전체의 영상이나, 방송국 등에 의해 지정되는 ROI(Region Of Interest)의 에어리어(하나 또는 인접하는 복수의 직사각형 영역으로 이루어짐)의 영상 등이다. 한편, 수많은 유저가 공통적으로 시청할 가능성이 낮고, 특정 유저에 의해 시청될 수 있는 영상이란, 그 밖의 직사각형 영역의 영상 등이다.
당해 자유 시점 스트리밍 서비스에 의하면, 유저는, 임의의 직사각형 영역(또는 인접하는 복수의 직사각형 영역)을 지정함으로써, 촬상 공간 중 관심이 있는 영역의 동화상만을 시청하는 것이 가능해진다.
「기존의 Web 서버로 끊김 없는 동화상 분배를 실현」, 히라바야시 미츠히로, NIKKEIELECTRONICS 2012.3.19
그런데 미국 차기 디지털 텔레비전 규격인 ATSC 3.0에서 DASH를 채용하여, 상술한 자유 시점 스트리밍 서비스를 실현하는 경우, 각 직사각형 영역의 영상이 방송 분배될지, 인터넷 분배될지를 나타내는 분배 모드 정보나, 각 직사각형 영역의 영상의 ROI 식별자(어느 ROI에 속해 있는지를 나타내는 정보)를, 방송 시그널링의 레벨로 인식시킬 수 있도록 해 두면, 방송 분배 리소스(대역이나 수신 스택에서의 계산 처리 등)를 할당하는 우선도 지정의 지표로서 이용할 수 있다.
그러나 현 상황에 있어서 이들 ROI 식별자를 시그널링하는 방법에 대해서는 확립되어 있지 않다.
본 기술은 이러한 상황에 비추어 이루어진 것이며, 방송 분배 또는 인터넷 분배 중 적어도 한쪽에 의해 분배되는 영상의 ROI 식별자를 시그널링할 수 있도록 하는 것이다.
본 기술의 제1 측면인 분배 장치는, 복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와, 상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와, 상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부를 구비한다.
상기 통지부는, 상기 세그먼트 파일에 관한 상기 속성 정보로서, 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 어느 것에 의해 분배되는 것인지를 나타내는 분배 모드 정보를 수신측에 더 통지할 수 있다.
상기 통지부는, 상기 세그먼트 파일에 관한 상기 속성 정보를, DASH에 규정되어 있는 MPD에 기재하여 수신측에 통지할 수 있다.
상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, USD에 기재하여 수신측에 통지할 수 있다.
상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, EFDT에 기재하여 수신측에 통지할 수 있다.
상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, Entity 헤더에 기재하여 수신측에 통지할 수 있다.
상기 촬상 범위에는 하나 이상의 상기 ROI가 설정되어 있도록 할 수 있다.
상기 분배부는, 모두 상기 영역에 각각 대응하는 상기 영상 스트림의 세그먼트 파일을 인터넷 분배함과 함께, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일을 방송 분배할 수 있다.
본 기술의 제1 측면인 분배 방법은, 분배 장치에 의한, 복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와, 상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배 스텝과, 상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지 스텝을 포함한다.
본 기술의 제1 측면인 프로그램은, 컴퓨터를, 복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와, 상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와, 상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부로서 기능시킨다.
본 기술의 제1 측면에 있어서는, 복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림이 세그먼트 파일화되고, 상기 영역마다의 상기 영상 스트림의 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급되고, 상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 수신측에 통지된다.
본 기술의 제2 측면인 수신 장치는, 복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 해석부와, 상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구부와, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득부와, 취득된 상기 세그먼트 파일을 재생하는 재생부를 구비한다.
상기 요구부는, 유저로부터의 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구할 수 있다.
상기 요구부는, 화면 상의 피사체를 지정하는 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구할 수 있다.
상기 요구부는, 피사체의 메타데이터를 선택하는 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구할 수 있다.
상기 속성 정보는, 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 어느 것에 의해 분배되는 것인지를 나타내는 분배 모드 정보를 더 포함할 수 있고, 상기 취득부는, 상기 분배 모드 정보에 기초하여, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득할 수 있다.
상기 해석부에 의한 상기 속성 정보의 해석 결과는, SAND 메시지를 사용하여 상기 요구부에 통지되도록 할 수 있다.
본 기술의 제2 측면인 수신 방법은, 수신 장치에 의한, 복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 해석 스텝과, 상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구 스텝과, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득 스텝과, 취득된 상기 세그먼트 파일을 재생하는 재생 스텝을 포함한다.
본 기술의 제2 측면인 프로그램은, 컴퓨터를, 복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 해석부와, 상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구부와, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득부와, 취득된 상기 세그먼트 파일을 재생하는 재생부로서 기능시킨다.
본 기술의 제2 측면에 있어서는, 속성 정보가 해석되고, 상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 세그먼트 파일이 요구되고, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배를 통해 취득되고, 취득된 상기 세그먼트 파일이 재생된다.
본 기술의 제3 측면인 콘텐츠 분배 시스템은, 분배 장치와 수신 장치를 포함하는 콘텐츠 분배 시스템에 있어서, 상기 분배 장치가, 복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와, 상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와, 상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부를 구비한다. 또한, 상기 수신 장치가, 상기 분배 장치로부터 통지된 상기 속성 정보를 해석하는 해석부와, 상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구부와, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득부와, 취득된 상기 세그먼트 파일을 재생하는 재생부를 구비한다.
본 기술의 제3 측면에 있어서는, 분배 장치에 의한, 복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림이 세그먼트 파일화되고, 상기 영역마다의 상기 영상 스트림의 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급되고, 상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 수신측에 통지된다. 또한, 수신 장치에 의해, 분배 장치로부터 통지된 속성 정보가 해석되고, 상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 세그먼트 파일이 요구되고, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배를 통해 취득되고, 취득된 상기 세그먼트 파일이 재생된다.
본 기술의 제1 측면에 따르면, 방송 분배 또는 인터넷 분배 중 적어도 한쪽에 의해 분배되는 영상의 ROI 식별자를 시그널링하는 것이 가능해진다.
본 기술의 제2 측면에 따르면, 특정 ROI에 속하는 영역의 세그먼트 파일을 취득하여, 재생할 수 있다.
본 기술의 제3 측면에 의하면, 방송 분배 또는 인터넷 분배 중 적어도 한쪽에 의해 분배되는 영상의 ROI 식별자를 시그널링할 수 있고, 수신측에서는, 특정 ROI에 속하는 영역의 세그먼트 파일을 취득하여, 재생할 수 있다.
도 1은 콘텐츠 분배 시스템의 구성예를 나타내는 블록도이다.
도 2는 MPD의 데이터 구조를 나타내는 도면이다.
도 3은 Representation의 예를 나타내는 도면이다.
도 4는 MPD에 있어서의 Period 이하의 계층 구조를 나타내는 도면이다.
도 5는 시간축 상에 MPD의 구조를 배열한 상태를 나타내는 도면이다.
도 6은 콘텐츠 분배 시스템의 보다 상세한 구성예를 나타내는 블록도이다.
도 7은 본 기술을 적용한 클라이언트 장치의 구성예를 나타내는 블록도이다.
도 8은 PER 메시지에 대해 설명하기 위한 도면이다.
도 9는 ResourceStatus의 각 요소를 설명하는 도면이다.
도 10은 ROUTE/DASH 베이스의 스택을 나타내는 도면이다.
도 11은 ROUTE 프로토콜이 사용된 경우에 대응하는 클라이언트측의 동작을 설명하기 위한 도면이다.
도 12는 촬상 공간 전체와 직사각형 영역과 에어리어의 관계를 나타내는 도면이다.
도 13은 촬상 공간 전체와 직사각형 영역과 에어리어의 관계를 나타내는 도면이다.
도 14는 도 11에 나타낸 ROI의 이동에 대응하여 방송 분배되는 Segment가 변화되는 모습을 나타내는 도면이다.
도 15는 화상 전체를 4개의 직사각형 영역으로 분할한 경우를 나타내는 도면이다.
도 16은 도 14에 대응하는 각 Segment의 방송 분배 병용의 유무와 ROI 식별자를 나타내는 도면이다.
도 17은 도 16에 대응하는 MPD-SRD 표현을 나타내는 도면이다.
도 18은 화상 전체와 그것에 있어서의 직사각형 영역의 위치와 해상도를 나타내는 도면이다.
도 19는 MPD의 확장 위치를 나타내는 도면이다.
도 20은 MPD의 확장 위치를 나타내는 도면이다.
도 21은 확장된 MPD에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내는 도면이다.
도 22는 MPD에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내는 도면이다.
도 23은 SegmentTemplate을 이용하여 재기입한 MPD-SRD 표현을 나타내는 도면이다.
도 24는 도 23의 MPD-SRD 표현을 설명하기 위한 도면이다.
도 25는 USD의 확장 위치를 나타내는 도면이다.
도 26은 확장된 USD에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내는 도면이다.
도 27은 분배 모드 정보와 ROI 식별자를 저장한 ResourceStatus 메시지의 구체예를 나타내는 도면이다.
도 28은 USD에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내는 도면이다.
도 29는 EFDT의 확장 위치를 나타내는 도면이다.
도 30은 확장된 EFDT에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내는 도면이다.
도 31은 EFDT에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내는 도면이다.
도 32는 확장된 Entity 헤더에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내는 도면이다.
도 33은 Entity 헤더에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내는 도면이다.
도 34는 클라이언트 장치에 있어서의 ROI 식별자의 이용예를 나타내는 도면이다.
도 35는 범용의 컴퓨터의 구성예를 나타내는 블록도이다.
이하, 본 기술을 실시하기 위한 구체적인 내용(이하, 실시 형태라고 칭함)에 대해, 도면을 참조하면서 상세하게 설명한다. 또한, 설명은, 이하의 순서로 행한다.
1. <DASH를 채용한 콘텐츠 분배 시스템의 구성예>
2. <본 기술을 적용한 클라이언트 장치의 구성예>
3. <PER 메시지에 대해>
4. <MPD에 분배 모드 정보와 ROI 식별자를 저장하는 경우>
5. <MPD에 SegmentTemplate을 이용하는 경우의 대응>
6. <USD에 분배 모드 정보와 ROI 식별자를 저장하는 경우>
7. <EFDT의 확장>
8. <Entity 헤더의 확장>
9. <클라이언트 장치에 있어서의 ROI 식별자의 이용예>
<DASH의 개요 설명>
먼저, DASH의 개요에 대해 설명한다. 도 1은, DASH를 채용한 콘텐츠 분배 시스템의 구성예를 나타내고 있다. 도 1의 좌측에 나타내는 Media Presentation on HTTP Server는 콘텐츠의 분배측이고, 도 1의 우측에 나타내는 HTTP Streaming Client가 콘텐츠의 수신측이며, 수신한 콘텐츠의 스트림을 수신하여 재생하고, 유저에게 제시할 수 있다.
분배측의 Media Presentation on HTTP Server는, 동일 내용의 콘텐츠이며, 패스가 되는 지상파 디지털 방송이나 위성 방송 등의 방송망, 인터넷 등의 양방향 통신망, 3GPP나 LTE-eMBMS 등의 휴대 전화 통신망의 통신 환경이나 수신측의 능력이나 상태에 따라서 화질이나 화각 사이즈 등이 변경되는 복수의 스트림을 준비하여, 공급할 수 있다.
또한, Media Presentation on HTTP Server는, 동일 콘텐츠의 촬상 영역 전체의 영상이나 촬상 영역을 복수로 분할한 각 직사각형 영역의 영상, 즉, 동일한 콘텐츠에 속하지만 내용이 상이한 영상을, 패스의 통신 환경이나 수신측의 능력이나 상태에 따라서 화질이나 화각 사이즈 등이 변경되는 복수의 스트림을 준비하여, 공급할 수 있다.
한편, 수신측의 HTTP Streaming Client는, 분배측이 준비하고 있는 복수의 스트림 중, 패스의 통신 환경이나 수신측의 능력이나 상태 등에 따라서 최적의 스트림을 선택하여 취득, 재생할 수 있다.
이와 같이, DASH에 있어서는, 수신측이 스트림을 적응적으로 선택하여 취득할 수 있도록, MPD(Media Presentation Description)라고 칭해지는 메타데이터가 콘텐츠의 분배측으로부터 수신측으로 공급된다.
MPD에는, 청크화된 스트림(Audio/Video/Subtitle 등의 미디어 데이터)의 어드레스(url 정보)가 기술되어 있고, 수신측은 당해 url 정보에 기초하여, 콘텐츠의 공급원이 되는 소정의 서버에 액세스하고, HTTP 분배되는 스트리밍 데이터를 취득, 재생할 수 있다.
또한, 분배측과 비교하여 압도적으로 수가 많은 수신측의 HTTP Streaming Client가 콘텐츠의 공급원이 되는 동일한 서버에 대해 동일한 스트림을 요구하는 일이 일어날 수 있다. 그러한 경우, 각 HTTP Streaming Client로부터의 공급에 따라서 그때마다 동일한 스트림을 송신하면 통신 효율이 나쁘기 때문에, 인터넷상 등에 이른바 프록시 서버를 마련하는 경우가 있다.
도 2는, 콘텐츠의 분배측으로부터 수신측으로 공급되는 메타데이터로서의 MPD의 데이터 구조를 나타내고 있다.
MPD는, 콘텐츠에 관한 정보가 Period마다 구분되어 있다. 각 Period에는, 동일 내용이며 화질이나 화각 사이즈, 언어 등이 변경되는 비트 레이트 등의 스트림 속성이 상이한 동기된 스트리밍 데이터에 관한 정보로 이루어지는 복수의 Representation을 그룹핑하는 AdaptationSet가 준비되어 있다. Representation에는, Period를 또한 시간적으로 분할한 Segment에 관한 정보가 저장되어 있다.
또한, Period는, 콘텐츠의 시간적인 분할 단위이다. Segment는, Period를 시간적으로 더 세분화한 단위이며, 콘텐츠의 스트림은, Segment의 단위로 Segment 파일에 파일화되어 있다.
각 Segment 파일은 URL(+바이트 레인지)로 특정된다. Segment는 Representation의 일부이며, 하나의 Representation은 이하 중 어느 것으로 구성된다.
(1) 하나 또는 그 이상의 SegmentList
(2) 하나의 SegmentTemplate
(3) 하나 또는 그 이상의 BaseURL과, 최대 하나의 SegmentBase(이 경우는 SegmentList 및 SegmentTemplate은 포함하지 않음)
도 3은, 상기 (1) 내지 (3)에 해당되는 Representation의 예를 나타내고 있다.
상기 (3)에 있어서의 SegmentBase는, 도 3의 A에 나타낸 바와 같이, 하나의 Representation에 하나의 MediaSegment밖에 없는 경우에 이용된다. 이 경우, 초기화 정보의 바이트 열과 Random Access Points(RAP)의 바이트 열이 파일의 최초의 834 바이트(SegmentBase의 indexRange로 기술함) 이내에 포함되어 있다.
상기 (1)에 있어서의 SegmentList는, 도 3의 B에 나타낸 바와 같이, 재생순으로 배치되는 복수의 SegmentURL로 구성된다. SegmentURL은 Segment 파일의 URL(+그 파일 내의 바이트 레인지)에 의해 표현된다. SegmentList의 처음에 배치되어 있는 Initilization은, 초기화 정보가 저장되어 있는 파일(InitSegment)을 지시한다.
상기 (2)에 있어서의 SegmentTemplate은, SegmentTemplate에 기초하여 SegmentURL을 자동적으로 생성할 때(라이브 스트리밍이 전형적인 유스케이스)에 이용된다. 즉, 수신측에 있어서, SegmentTemplate에 기재되는 SegmentURL의 모형에 포함되는 소정의 파라미터를 동적으로 치환해 감으로써, 완전한 SegmentURL의 리스트를 생성한다. SegmentTemplate을 이용함으로써 MPD의 사이즈를 매우 작게 하는 것이 가능해진다.
예를 들어, 도 3의 C에 나타낸 바와 같은 SegmentTemplate이 이용된 경우, ReplacementParameter인 $Number$를, StartNumber로 나타나는 값을 초기값으로서 1씩 인크리먼트한 값으로 치환함으로써, 도 3의 D에 나타낸 바와 같은 SegmentURL을 생성한다.
도 4는, MPD에 있어서의 Period 이하의 계층 구조를 나타내고 있다. 또한, MPD는, 예를 들어 XML 형식으로 기술된다. Period의 하층에는, 스트림의 선택 범위가 되는 Representation군을 그룹핑하는 정보인 AdaptationSet가 기술된다. AdaptationSet의 하층에는, 동화상이나 음성의 비트 레이트, 화각 사이즈, 언어 등을 표현하는 정보를 포함하는 Representation이 기술된다. Representation의 하층에는, 동화상이나 음성의 Segment 관련 정보인 Segmentinfo가 기술된다. Segmentinfo의 하층에는, 데이터 압축 방식 등의 초기화 정보를 나타내는 Initialization Segment 및 동화상이나 음성의 Segment 단위의 데이터 공급원을 나타내는 Media Segment가 기술된다.
수신측에서는, MPD의 Period에 포함되는 Representation의 속성에 기초하여 수신, 재생에 최적인 Representation을 선택하고, 선택한 Representation의 선두의 Segment로부터 Initialization Segment를 취득하여 데이터 압축 방식 등을 판단한 후, 후속의 segment를 요구, 취득하여, 재생을 행할 수 있다.
도 5는, 시간축 상에 MPD의 구조를 배열한 상태를 나타내고 있다. 도 5로부터 명백한 바와 같이, 동일한 AdaptationSet에 포함되는 스트림 속성이 상이한 각 Representation의 Segment끼리는 동기된 것이 된다.
상술한 바와 같이, 동일 콘텐츠의 촬상 영역 전체의 영상이나 촬상 영역을 복수로 분할한 각 직사각형 영역의 영상의 스트림은, 각각 상이한 AdaptationSet에 속해 있지만, 그 경우에도, 상이한 AdaptationSet에 포함되는 각 Representation의 Segment끼리도 동기된 것이 된다.
다음으로, 도 6은, DASH를 채용한 콘텐츠 분배 시스템의 보다 상세한 구성예를 나타내고 있다.
도 6에 있어서의 DASH 서버, Web 서버 및 방송 서버는, 도 1에 있어서의 Media Presentation on HTTP Server에 상당한다. 또한, 도 6에 있어서의 DASH 클라이언트는, 도 1에 있어서의 HTTP Streaming Client에 상당한다.
DASH 서버 및 Web 서버에 대해, DASH 클라이언트는, 인터넷상에 형성된 CDN(Content Delivery Network)을 통해 액세스할 수 있다. CDN에는 DASH 캐시 서버(프록시 서버)가 마련되어 있다.
DASH 서버는, MPD를 생성하여 방송 서버로 전송함과 함께, 스트림의 Segment 파일을 생성하여 Web 서버로 전송한다. 또한, DASH 서버는, DASH 클라이언트로부터의 HTTP 리퀘스트에 따라서, 생성된 MPD를 CDN(Content Delivery Network)을 통해 인터넷 분배한다. Web 서버는, MPD를 참조하여 스트림의 취득처를 선택한 DASH 클라이언트로부터의 HTTP 리퀘스트에 따라서, CDN을 통해 Segment 파일을 인터넷 분배한다. 방송 서버는, MPD를 방송 분배한다. 또한, 방송 서버는, Segment 파일을 방송 분배한다.
DASH 캐시 서버는, CDN을 감시하여, DASH 클라이언트에 대해 CDN을 통해 분배되는 Segment 파일을 일시적으로 캐시한다. 그리고 DASH 캐시 서버는, DASH 클라이언트로부터 캐시되어 있는 Segment 파일을 요구하는 HTTP 리퀘스트가 Web 서버로 송신된 경우, Web 서버 대신에, 캐시되어 있는 Segment 파일을 요구원인 MPD 클라이언트에 분배한다.
또한, DASH 캐시 서버는, 스트림의 Segment 파일뿐만 아니라, MPD도 일시적으로 캐시할 수 있고, DASH 서버 대신에, 캐시되어 있는 MPD를 요구원인 DASH 클라이언트에 공급할 수 있다. 또한, DASH 캐시 서버가 방송 분배되는 MPD나 Segment 파일을 수신, 캐시할 수 있도록 해도 된다.
CDN 상에 DASH 캐시 서버를 마련함으로써, 당해 콘텐츠 분배 시스템에서는, 대다수의 DASH 클라이언트에 대한 HTTP 스트리밍의 분배 효율을 향상시킬 수 있다.
<본 기술을 적용한 클라이언트 장치의 구성예>
다음으로, 도 7은, ATSC 3.0에 있어서 DASH를 채용하여, 자유 시점 스트리밍 서비스를 실현하는 경우에 있어서의 수신측의 클라이언트 장치의 구성예를 나타내고 있다.
당해 클라이언트 장치(100)는, ATSC 3.0 이외의 규격에 있어서 DASH를 채용한 스트리밍 분배 서비스를 실현하는 경우에도 적용하는 것이 가능하다.
클라이언트 장치(3.0 Client(with ATSC 3.0 PHY/MAC))(100)는, 예를 들어 일반 가옥에 설치되거나, 자동차 등의 이동체에 탑재되거나 하는 텔레비전 수상기나 비디오 레코더, 셋톱 박스에 내장되는 것을 상정한 것이다.
클라이언트 장치(100)는, 방송 수신부(Client ATSC Middleware)(110), 통신부(Ethernet/WiFi etc.)(120), 프록시 서버부(Client Local HTTP Proxy Server)(130) 및 DASH 클라이언트부(3.0 DASH Client)(140)를 구비한다.
방송 수신부(110)는, Broadcaster(10)(도 6의 방송 서버에 상당)로부터, 지상파 디지털 방송 또는 위성 방송 등의 방송망(11)을 통해 분배되는 MPD, 스트림의 Segment 파일, SLS 파일 등을 수신하는 처리를 실행한다.
방송 수신부(110)는, 방송파를 수신하는 튜너부(111), 방송파로부터 Segment 파일을 추출하는 Segment Retriever(112), 방송파로부터 LLS(Low Level Signaling) 파일을 추출하는 LLS Signaling Retriever(113), 및 LLS 파일을 해석하는 LLS Signaling Parser(114)를 구비한다. 또한, 방송 수신부(110)는, 방송파로부터 SLS(Service Layer Signaling) 파일을 추출하는 SLS Signaling Retriever(115) 및 SLS 파일을 해석하는 SLS Signaling Parser(116)를 구비한다.
통신부(120)는, 인터넷 등의 양방향 통신망에 형성되어 있는 CDN(12)을 통해, Broadcaster(10)((도 6의 DASH 서버 및 Web 서버에 상당))에 대해 MPD, 스트림의 Segment 파일, SLS 파일을 요구하고(HTTP 리퀘스트를 송신하고), 그것에 따라서 HTTP 분배되는 MPD나 Segment 파일을 수신하는 처리를 실행한다.
프록시 서버부(130)는, 방송망(11)을 통해 수신된 각종 파일을 캐시하는 Proxy Cache(131), CDN(12)을 통해 수신된 각종 파일을 저장하는 Proxy Cache(132), 및 DASH 클라이언트부(140)로부터의 요구에 대응하는 Broadcast/Broadband Address Resolver(133)를 구비한다.
Broadcast/Broadband Address Resolver(133)는, Proxy Cache(131 또는 132)에 캐시되어 있는 MPD나 Segment 파일을, DASH 클라이언트부(140)로부터의 요구에 따라서 그것들을 공급하는 처리를 실행한다.
또한, Broadcast/Broadband Address Resolver(133)는, 방송 수신부(110)나 통신부(120)에 의한 Segment 파일의 수신 상태 등을 나타내는 공급 가부 정보를, PER 메시지를 사용하여 DASH 클라이언트부(140)에 통지하는 처리를 실행한다.
또한, Broadcast/Broadband Address Resolver(133)는, 각 Segment 파일이 인터넷 분배와 함께 방송 분배되는지 여부를 나타내는 방송 분배 병용 정보와, 각 Segment 파일이 ROI에 속해 있는 경우에 그 소속을 나타내는 ROI 식별자를, PER 메시지를 사용하여 DASH 클라이언트부(140)에 통지하는 처리를 실행한다. PER 메시지의 상세에 대해서는 후술한다.
DASH 클라이언트부(140)는, MPD를 요구, 취득하는 MPD Retriever(141), MPD를 해석하는 MPD Parser(142), MPD를 참조하여 Segment 파일을 요구, 취득하는 Segment Retriever(143), 및 Segment 파일로부터 MP4 데이터를 추출, 해석하는 MP4 Parser(144)를 구비한다. 또한, DASH 클라이언트부(140)는, MP4 데이터를 디코딩하는 Decoder(145) 및 디코딩 결과를 렌더링하는 Renderer(146)를 구비한다.
DASH 클라이언트부(140)는, 예를 들어 클라이언트 장치(100)에 실장된 브라우저상에서 실현된다. 단, 브라우저 어플리케이션으로서 뿐만 아니라 네이티브 어플리케이션으로서 실현하도록 해도 된다. DASH 클라이언트부(140)는, 프록시 서버부(130)를 통해, 방송 수신부(110) 또는 통신부(120)가 수신한 MPD, Segment 파일, SLS 파일 등을 취득하고, 스트림의 렌더링이나 어플리케이션의 제어를 행함으로써, 스트림의 영상 및 음성을 후속 단계의 모니터(도시하지 않음)에 출력하는 처리를 실행한다.
또한, DASH 클라이언트부(140)는, 클라이언트 장치(100)뿐만 아니라, 클라이언트 장치(100)에 대해 LAN(20)을 통해 접속되어 있는 클라이언트 장치(200)에 실장할 수 있다. 클라이언트 장치(200)는, 예를 들어 스마트폰, 태블릿 등을 상정한 것이다.
클라이언트 장치(200)에 있어서의 DASH 클라이언트부(140)는, LAN(20)을 통해 클라이언트 장치(100)에 접속되고, 클라이언트 장치(100)의 프록시 서버부(130)를 통해, 방송 수신부(110) 또는 통신부(120)가 수신한 MPD, Segment 파일, SLS 파일 등을 취득하고, 스트림의 렌더링이나 어플리케이션의 제어를 행함으로써, 스트림의 영상 및 음성을 후단의 모니터(도시하지 않음)에 출력하는 처리를 실행할 수 있다.
또한, 도시는 생략하지만, 클라이언트 장치(100)로부터 DASH 클라이언트부(140)를 생략한 구성을 갖는 공급 장치를, LAN(20)에 접속해도 된다. 그 경우, 클라이언트 장치(100 및 200)는, 당해 공급 장치에 대해서도 MPD나 Segment 파일 등을 요구할 수 있다.
상술한 바와 같이, 클라이언트 장치(100)에 있어서의 DASH 클라이언트부(140) 및 클라이언트 장치(200)에 있어서의 DASH 클라이언트부(140)는, 반드시 프록시 서버부(130)를 통해 각종 파일을 취득하고 있다. 따라서, DASH 클라이언트부(140)는, 취득하는 각종 파일이 방송망(11)을 통하는 방송 분배인지, CDN(12)을 통하는 인터넷 분배인지의 구별을 의식할 필요가 없는, 이른바 네트워크 투과성을 실현할 수 있다. 따라서, DASH 클라이언트부(140)는, 그 가반성이 높아지므로, 방송을 수신할 수 없는 장치에 대해서도 DASH 클라이언트부(140)를 탑재하는 것이 가능해진다.
다음으로, 프록시 서버부(130)에 대해 상세하게 설명한다. 프록시 서버부(130)는, DASH 클라이언트부(140)로부터 각종 파일의 취득이 요구되면(HTTP 리퀘스트를 수신하면), Broadcast/Broadband Address Resolver(133)가, 그것을 방송망(11) 경유로 취득할지, CDN(12) 경유로 취득할지를 판단한다. 이 판단의 재료가 되는 정보는, 방송 수신부(110)의 SLS Signaling Parser(116)로부터 제공된다.
방송 수신부(110)의 SLS Signaling Parser(116)는, SLS Signaling Retriever(115)에 대해, ATSC 3.0의 시그널링 메타데이터인 USBD/USD나 S-TSID 등의 취득 요구를 행한다. SLS Signaling Retriever(115)는, 튜너부(ATSC 3.0 PHY/MAC)(111)가 수신하는 방송 신호로부터 SLS LCT 패킷에 의해 운반되는 시그널링 메타데이터를 추출한다.
또한, SLS Signaling Parser(116)는, Segment 파일의 취득 요구에 포함되는 url로부터 시그널링 메타데이터를 취득하여, 대상이 되는 Segment 파일을 취득하기 위한 방송 분배 어드레스 정보를 취득한다. 대상이 되는 Segment 파일이 금후 방송 분배되거나, 또는 이미 방송 분배된 것을 알면, 그 방송 분배 어드레스 정보에 기초하여, 대상이 되는 Segment 파일이 저장되어 있는 segment LCT 패킷을 방송 스트림으로부터 취득하여 프록시 서버부(130)의 Proxy Cache(131) 내에 전개한다. 이후, 프록시 서버부(130)는, DASH 클라이언트부(140)에 대해 HTTP 리퀘스트의 리스폰스로서 당해 Segment 파일을 회신하게 된다.
요구된 Segment 파일의 url이 시그널링 메타데이터에 없으면, 프록시 서버부(130)는, 통신부(120)를 통해 Segment 파일을 취득하고, 취득한 Segment 파일을 Proxy Cache(132) 내에 전개한다. 이후, 프록시 서버부(130)는, DASH 클라이언트부(140)에 대해 HTTP 리퀘스트의 리스폰스로서 당해 Segment 파일을 회신하게 된다.
<PER 메시지에 대해>
다음으로, PER 메시지에 대해 설명한다. 공급 가부 정보, 방송 분배 병용 정보, 및 ROI 식별자는, 이하에 설명하는 PER 메시지를 확장하여 저장한다.
도 8은, PER 메시지에 대해 설명하기 위한 도면이다. PER 메시지는, DANE(DASH-Aware Network Elements)(300)으로부터 DASH Client(400)에 대해 통지되는 메시지이다.
여기서, DANE(300)은, 도 7에 나타낸 DASH 클라이언트 장치(100)의 프록시 서버부(130)에 상당한다. DASH Client(400)는, DASH 클라이언트 장치(100)의 DASH 클라이언트부(140)에 상당한다.
DASH에 있어서는, SAND라고 칭해지는 프로토콜의 규정이 검토되고 있다. SAND는, DASH를 효과적으로 운용하기 위해, 네트워크 오퍼레이터가 관리하는 DASH 분배 컴포넌트군으로부터 제공될 수 있는 다양한 리얼타임 네트워크 환경(분배 리소스) 정보를 교환, 제공하기 위한 프로토콜이다.
SAND에는, DANE(300)으로부터 DASH Client(400)에 제공되는 메시지(PER 메시지)의 메시지 프로토콜로서 PER이 규정되어 있다. 또한, DASH Client(400)로부터 DANE(300)에 제공되는 메시지(Status 메시지)의 메시지 프로토콜로서 Status가 규정되어 있다. 또한, 이하, PER 메시지 또는 Status 메시지를 SAND 메시지라고도 칭한다.
PER에서는, ResourceStatus라고 칭하는 메시지와, 이 동류의 메시지로서 DaneResourceStatus라고 칭하는 메시지가 정의되어 있다.
도 9는, ResourceStatus의 각 요소를 설명하는 도면이다. 본 실시 형태에서는, ResourceStatus의 Status 요소를 확장하여 공급 가부 정보를 저장할 수 있도록 하고, 프록시 서버부(130)로부터 DASH 클라이언트부(140)에 통지한다.
또한, ResourceStatus의 Reason 요소를 확장하여 방송 분배 병용 정보와 ROI 식별자를 저장할 수 있도록 하고, 프록시 서버부(130)로부터 DASH 클라이언트부(140)에 통지한다. 당해 Reason 요소에는, ROI 식별자가 나타내는 ROI 계열의 메타데이터(예를 들어, 당해 ROI 계열이 추종하여 이동되는 선수의 이름 등)를 더 기술하도록 해도 된다. 또한, ROI 식별자가 나타내는 ROI 계열의 메타데이터는, 방송 분배 또는 인터넷 분배에 의해 클라이언트 장치(100)에 공급되는 것으로 한다.
ResourceStatus를 수취한 DASH client(400)는, ResourceStatus에 기초하여 다음에 요구할 DASHSegment 파일을 선택할 수 있다. 또한, ResourceStatus에는, 유효 기한이 기술되어 있으므로, DASH client(400)는 ResourceStatus의 유효 기한까지는 그 내용이 유효하다고 간주할 수 있다.
<ROUTE(Real-Time Object Delivery over Unidirectional Transport) 프로토콜>
다음으로, ROUTE 프로토콜에 대해 설명한다. ATSC 3.0에 있어서는, IP 베이스의 트랜스포트 스택의 표준화 작업이 행해지고 있고, OTT 분배에서 주류가 되고 있는 MPEG-DASH의 파일 포맷(ISO-BMFF 파일, MP4 파일)에 기초하는 파일을, FLUTE(File Delivery over Unidirectional Transport)를 확장한 ROUTE 프로토콜을 사용하여 전송한다.
ROUTE 프로토콜을 사용함으로써, DASH의 fragmented MP4(프래그먼트화된 MP4 파일) 파일 시퀀스와, DASH의 제어 메타파일인 MPD나, 후술하는 각종 시그널링(3GPP-MBMS-USD(User Service Description)를 확장한 ATSC 버전의 USD나 ROUTE 프로토콜의 제어 메타데이터인 S-TSID 등)을 전송할 수 있다.
도 10은, ROUTE/DASH 베이스의 스택을 나타내고 있다. ROUTE 프로토콜은 FLUTE를 베이스로 하는 프로토콜이며, FLUTE에 있어서의 전송 제어 파라미터를 기술한 메타데이터 파일은 FDT(File Delivery Table)라고 칭해지고 있지만, FDT에 상당하는 ROUTE에 있어서의 제어 메타데이터는 S-TSID(Service-based Transport Session Instance Description)라고 칭해진다(실제로는 S-TSID/.../EFDT가 가장 가깝다).
S-TSID는, 어느 서비스(방송의 채널에 상당함) 내에서 전송되는 모든 서비스 컴포넌트(비디오/오디오/데이터 컨포넌트 스트림-모두 파일 전송 세션으로서 실현됨)에 대한 전송 제어 메타데이터를 기술한다. S-TSID 자신도, ROUTE 세션 중에서 서비스 시그널링 세션으로서 전송된다.
또한, S-TSID는 하나의 서비스 내에서 전송되는 컨포넌트 파일 세션에 대한 시그널링 메타데이터이지만, S-TSID 자신이 전송되는 서비스마다의 서비스 시그널링 메타데이터 전송 세션의 어드레스(서비스 부트스트랩 어드레스)를 해결하기 위한 부트스트랩 메타데이터로서 SLT(Service List Table)라고 칭하는 시그널링 메타데이터를 준비하고 있고, UDP/IP상에서 각각의 서비스와는 상이한 특별한 Destination IP Address/Destination Port에 의해 전송하도록 하고 있다.
도 11은, ROUTE 프로토콜이 사용된 경우에 대응하는 클라이언트측의 동작을 설명하기 위한 도면이다.
클라이언트 장치(110)는, 먼저 SLT를 취득한 후, 서비스 부트스트랩 어드레스에 의해 원하는 서비스의 서비스 시그널링(Service Level Signaling)을 취득하고, 당해 서비스를 구성하는 서비스 컴포넌트 자체를 취득하여 렌더링을 행하게 된다.
<자유 시점 스트리밍 서비스에 대해>
다음으로, 본 실시 형태인 콘텐츠 분배 시스템이 실현 가능한 자유 시점 스트리밍 서비스에 대해 다시 설명한다.
도 12 및 도 13은, 촬상 공간 전체(510)를 복수의 직사각형 영역(511)으로 분할한 경우를 예시하고 있는 도면이다.
도 12 및 도 13의 경우, 촬상 공간 전체(510)가 36개의 직사각형 영역(511)으로 분할되어 있다. 또한, 도면 중의 (1,1) 등은 촬상 공간 전체(510)에 있어서의 직사각형 영역(511)의 배치를 나타내고 있다. 여기서, 촬상 공간 전체(510)의 중앙 부분에 복수(도 12 및 도 13의 경우, 4)의 직사각형 영역(511)으로 이루어지는 에어리어(512A 내지 512D)를 설정한다.
예를 들어, 분배되는 콘텐츠가 축구 시합인 경우, 관객석을 포함하는 스타디움 회장 전체가 촬상 공간 전체(510)가 되고, 스타디움의 필드(그라운드)가 에어리어(512A 내지 512D)가 된다. 또한, 시합 중에 볼(513)이 이동하면, 그 움직임에 추종하는 에어리어가 ROI(514)가 되고, 도 13의 A 내지 도 13의 C에 나타낸 바와 같이 추이한다.
도 12 및 도 13과 같은 경우, 에어리어(512A 내지 512D)의 영상이 각각 1개의 AdaptationSet에 할당됨과 함께, 각 직사각형 영역(511)의 영상이 각각 DASH의 AdaptationSet에 할당된다. 그리고 수많은 유저가 공통적으로 시청할 가능성이 높은 에어리어(512A 내지 512D) 각각의 영상에 대응하는 Segment와, ROI(514)의 영상에 대응하는 Segment가 방송 분배된다. 그리고 그 밖의 직사각형 영역(511)의 영상에 대응하는 Segment는 인터넷 분배된다. 단, 방송 분배를 수신할 수 없는 유저나 방송 분배의 누락(수신 오류)을 배려하여, 모든 AdaptationSet에 속하는 Segment는 인터넷 분배도 행하도록 한다.
도 14는, 에어리어(512A 내지 512D)의 영상에 각각 대응하는 Segment와, 각 직사각형 영역(511)의 영상에 각각 대응하는 Segment가 방송 분배되는지(도면 중에서 색칠되어 있는 것), 인터넷 분배되는지(도면 중에서 무색인 것)를 나타내고 있다. 또한, 도 14의 상단, 중간단, 하단이 각각 도 13의 A, 도 13의 B, 도 13의 C에 대응한다.
예를 들어, 도 13의 A에 있어서의 ROI(514)는, 4개의 직사각형 영역(511(2,1, 2,2, 3,1, 3,2))으로 이루어지므로, 도 14의 상단에 나타낸 바와 같이, 에어리어(512A 내지 512D)의 영상에 각각 대응하는 Segment와, 4개의 직사각형 영역(511(2,1, 2,2, 3,1, 3,2))의 영상에 각각 대응하는 Segment가 방송 분배된다.
마찬가지로, 도 13의 B에 있어서의 ROI(514)는, 4개의 직사각형 영역(511(3,2, 3,3, 4,2, 4,3))으로 이루어지므로, 도 14의 중간단에 나타낸 바와 같이, 에어리어(512A 내지 512D)의 영상에 각각 대응하는 Segment와, 4개의 직사각형 영역(511(3,2, 3,3, 4,2, 4,3))의 영상에 각각 대응하는 Segment가 방송 분배된다.
또한, 도 13에 나타난 예에서는, 볼(513)에 추종하는 ROI가 하나만 설정되어 있지만, 예를 들어 유력 선수의 움직임에 추종하는 ROI 등, 복수의 ROI를 설정해도 된다. 단, 모든 ROI를 방송 분배할 필요는 없고, 유저에게 시청될 가능성에 따라서, 인터넷 분배만을 행하는 ROI가 있어도 된다.
또한, 도시는 생략하지만, 자유 시점 스트리밍 서비스는, 예를 들어 VR(Virtual Reality)에서 자주 사용되는 등거리 원통 화상을 SRD(Spatial Relation Description)에 매핑하는 경우에도 적용할 수 있다.
다음으로, 도 15는, 화면 전체(또는 촬상 범위 중 소정의 영역이어도 됨)를 4개의 직사각형 영역으로 분할한 예를 나타내고 있다. 이하, 설명을 간단하게 하기 위해, 도 15에 나타낸 바와 같이, 화면 전체를 4개의 직사각형 영역으로 분할함과 함께, ROI를 1개의 직사각형 영역으로 구성하도록 하고, 화면 전체와 4개의 직사각형 영역의 각각의 영상을 DASH의 AdaptationSet에 할당하여 분배하는 경우를 예로 들어 설명한다.
도 15의 예에서는, AdaptationSet.1.t가 화면 전체의 영상의 스트림이고, AdaptationSet.1-1.t 내지 1-4.t가, 화면 전체의 좌측 상단, 우측 상단, 좌측 하단 또는 우측 하단의 직사각형 영역 각각의 영상의 스트림이다. 또한, t는 시계열을 나타내는 파라미터이다.
또한, 도 15의 예에서는, ROI로서 roiId1과 roiId2의 2계통이 설정되어 있다. roiId1은, AdaptationSet.1-1.1로부터 AdaptationSet.1-2.2로, 또한 AdaptationSet.1-3.3으로 천이한다. roiId2는, AdaptationSet.1-3.1로부터 AdaptationSet.1-2.2로, 또한 AdaptationSet.1-2.3으로 천이한다.
2계통의 ROI 중, roiId1이 roiId2보다 주목도가 높다고 가정되어 있어, roiId1에 속하는 Segment는 모두 방송 분배 병용이 되고, roiId2에 속하는 Segment는 모두 인터넷 분배만으로 되어 있다.
AdaptationSet.1 하위의 Segment는 모두 인터넷 분배와 방송 분배가 행해지는 방송 분배 병용이고, 인터넷 분배용 url(예를 들어 url 접두어 "bb"로 기재)이 할당됨과 함께, 방송 분배용 url(예를 들어 url 접두어 "bc"로 기재)이 할당된다.
AdaptationSet.1-1 내지 1-4 하위의 Segment는, 각각이 방송 분배되는 경우만, 인터넷 분배용 url이 할당됨과 함께, 방송 분배용 url이 할당된다. 방송 분배되지 않는 경우(즉, 인터넷 분배만인 경우), 인터넷 분배용 url만이 할당된다.
또한, 각각의 Segment가 ROI에 속해 있는 경우에는, ROI 계열을 식별하기 위한 ROI 식별자가 적절하게 할당된다.
도 16은, AdaptationSet.1.t 하위의 Segment(예를 들어, Segment.1.1 등)와, AdaptationSet.1-1.t 내지 1-4.t 하위의 Segment(예를 들어, Segment.1-1.1 등)의 방송 분배 병용의 유무 및 ROI 식별자를 나타내고 있다.
예를 들어, Segment.1-1.1 등의 아래에 기재되어 있는 Url(bbSeg.1-1.1)은 Segment.1-1.1이 인터넷 분배되는 것을 의미한다. 또한, Url(bcSeg.1-1.1)은 Segment.1-1.1이 방송 분배되는 것을 의미한다. 또한, RoiIdentifier(roiId1)는 Segment.1-1.1이 roiId1의 ROI 계통에 속해 있는 것을 의미한다.
예를 들어, 화면 전체의 좌측 상단의 직사각형 영역에 대응하는 AdaptationSet.1-1.t에서는, t=1의 Segment.1-1.1은 roiId1에 속하기 때문에, 방송 분배 병용이 되지만(방송 분배와 인터넷 분배가 행해짐), t=2, 3의 Segment.1-1.2와 Segment.1-1.3은 ROI 계열에 속해 있지 않기 때문에, 인터넷 분배만이 행해진다.
또한, 예를 들어 화면 전체의 우측 상단의 직사각형 영역에 대응하는 AdaptationSet.1-2.t에서는, t=1의 Segment.1-2.1은 ROI 계열에 속해 있지 않기 때문에, 인터넷 분배만이 행해지지만, t=2의 Segment.1-2.2는 roiId1과 roiId2에 속하기 때문에, 방송 분배 병용이 된다.
또한, 예를 들어, 화면 전체의 좌측 하단의 직사각형 영역에 대응하는 AdaptationSet.1-3.t에서는, t=1의 Segment.1-3.1은 roiId2에 속하지만, 주목도가 낮다고 상정되어 있는 경우, 인터넷 분배만이 행해진다.
상술한 바와 같이, 각 Segment가 방송 분배되는지 인터넷 분배되는지를 나타내는 분배 모드 정보를 MPD에 기재하기 위해서는, AdaptationSet 요소의 자요소인 baseURL 요소에, 하위의 각 Segment의 url에 부가되는 url 접두어를 기재하면 된다.
예를 들어, AdaptationSet/baseURL="http://a.com/bc"이면, 그 하위에 속하는 소정의 Segment에 대해 AdaptationSet/Representation/SegmentList/SegmentURL@media="/segment11.mp4"라고 기재되는 경우, 당해 Segment의 url은, "http://a.com/bc/segment11.mp4"가 된다.
한편, ROI 식별자에 대해서는, 현상의 MPD에 Segment 단위로 기재할 수는 없으므로, MPD를 확장할 필요가 있다. 구체적으로는, SegmentURL의 속성에 roiId 요소를 추가하여 Segment마다의 ROI 식별자를 기재할 수 있도록 한다. 예를 들어, <SegmentURL roiId="roiId1">은, 당해 Segment의 ROI 식별자가 "roiId1"인 것을 나타낸다.
상술한 바와 같이, MPD에 Segment 단위의 분배 모드 정보와 ROI 식별자를 기재할 수 있도록 하면, 클라이언트 장치(100)는, MPD를 취득, 해석함으로써, 방송 분배, 인터넷 분배의 차이를 의식하고 Segment 파일을 취득하는 것이 가능해진다.
이에 의해, 예를 들어 화면 전체를 시청하고자 하는 유저의 디바이스에서는, SegmentUrl의 bcSeg.1.1로부터 bcSeg.1.2, bcSeg.1.3의 순으로 Segment 시퀀스를 취득하면 된다. 또한, 예를 들어 roiId="roiId1"을 시청하고자 하는 유저의 디바이스에서는, bcSeg.1-1.1로부터 bcSeg.1-2.2, cSeg.1-3.3의 순으로 Segment 시퀀스를 취득하면 된다. 마찬가지로, roiIId="roiId2"를 시청하고자 하는 유저의 디바이스에서는, bbSeg.1-3.1로부터 bcSeg.1-2.2, bbSeg.1-2.3의 순으로 Segment 시퀀스를 취득하면 된다.
또한, MPD에 있어서, 동일한 Segment에 대해 방송 분배용 url과 인터넷 분배용 url이 기재되어 있는 경우(즉, 당해 Segment가 방송 분배 병용인 경우), 방송 분배의 Segment를 수신할지, 인터넷 분배의 Segment를 수신할지에 대해서는, 클라이언트 장치(100)가 자신의 수신 상황 등에 따라서 결정하면 된다.
<MPD에 분배 모드 정보와 ROI 식별자를 저장하는 경우>
도 17은, 도 15 및 도 16에 나타낸 예의 t=1의 타이밍에 대응하는 MPD-SRD 표현을 나타내고 있다. 도 18은, 화상 전체와 그것에 있어서의 직사각형 영역의 위치와 해상도를 나타내고 있다.
MPD-SRD에 있어서의 <AdaptationSet id="1"…>로부터 그것에 대응하는 </AdaptationSet>까지의 기재는, 도 18의 A에 사선으로 나타낸 화면 전체에 대응한다. <AdaptationSet id="1-1"…>로부터 그것에 대응하는 </AdaptationSet>까지의 기재는, 도 18의 B에 사선으로 나타낸 화면 전체의 좌측 상단의 직사각형 영역에 대응한다. 여기에 기재되어 있는 roiId="roiId1" 등이 MPD의 확장 부분이다.
<AdaptationSet id="1-3"…>으로부터 그것에 대응하는 </AdaptationSet>까지의 기재는, 도 18의 C에 사선으로 나타낸 화면 전체의 좌측 하단의 직사각형 영역에 대응한다. <AdaptationSet id="1-4"…>로부터 그것에 대응하는 </AdaptationSet>까지의 기재는, 도 18의 D에 사선으로 나타낸 화면 전체의 우측 하단의 직사각형 영역에 대응한다.
도 19 및 도 20은, ROI 식별자를 기재하기 위해 MPD를 확장한 구체적인 위치에 나타내고 있다.
도 19 및 도 20에 나타낸 바와 같이, ROI 식별자를 기재하기 위한 roiId 요소는, MPD/Period/AdaptationSet/Representation/SegmentList/SegmentURL의 속성에 추가된다.
다음으로, 도 21은, 확장된 MPD에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내고 있다.
도 21의 A에 나타낸 서비스 시그널링 세션은, 서비스 레이어의 시그널링 XML 프래그먼트인 SLS를 전송하는 트랜스포트 세션이다. 도 21의 B에 나타낸 컨포넌트 파일 세션은, 서비스를 구성하는 각 동화상/음성/서브타이틀/어플리케이션/기타 각종 데이터를 전송하는 트랜스포트 세션이다. 각 컴포넌트 세션의 상세한 스트림 속성은 SLS에 기재되고, 스트림을 취득하기 위한 어드레스도 기재된다.
ROUTE의 파일 전송에 있어서는, UDP/IP상의 LCT 패킷의 TSI에 기초하여 그 세션이 식별되고, LCT 패킷의 TOI에 의해 그 세션 중에서 전송되는 각 파일 오브젝트가 식별된다.
도 21의 A의 예에서는, TSI="sls-tsi"로 식별되는 서비스 시그널링 세션에서, USD 및 S-TSID를 포함하는 sls-bundle 파일이 전송된다. sls-bundel 파일 자신은 파일 URL="slsid-url", TOI="0"에 의해 식별되고, 거기에 저장되는 USD 파일과 S-TSID 파일은 각각, 파일 URL="usd-url", "stsid-url"에 의해 식별된다. (LCT의 레이어로 파일을 재구성할 때에 필요해지는 것이 TSI와 TOI의 세트이며, sls-bundle 파일 자신이 TOI="0"에 의해 재구성되기 때문에, sls-bundle 파일 중에 저장된 USD나 S-TSID 파일은 TOI가 필요없다(ROUTE에서는 이것을 PackageMode의 파일 전송이라고 칭하고 있음). USD(USBD/USD)의 userServiceDescripion에는 각 서비스 속성이 기재된다.
userServiceDescription은, S-TSID 파일의 url("stsid-url")을 저장하는 sTSIDUri 속성을 갖는다. S-TSID에는, 그 S-TSID/RS/LS/srcFlow에 각 컴포넌트의 속성을 기술한다.
도 21의 A의 예에서는, S-TSID에는 하나의 컴포넌트가 있고, 그 컴포넌트를 구성하는 파일군은 TSI="av-tsi"로 식별되는 세션에서 전송되고, 그 세션의 파일군의 각각의 속성을 기술하는 EFDT가 그들 파일군과 동일한 세션에서 전송되고, EFDT가 파일 URL="efdt-url"로 식별되는 것을 나타낸다. TSI="av-tsi"로 식별되는 세션에서 전송되는 EFDT에는 동일 세션에서 전송되는 하나의 파일에 대해 기술되어 있고, 그 파일은 파일 URL="bcSeg.1-1.1"로 식별되고, TOI="segmentFile-toi"의 LCT 패킷을 모으면 재구성할 수 있는 것을 나타내고 있다. 재구성된 파일 URL="bcSeg.1-1.1"로 식별되는 파일에는 Segment의 내용이 저장되어 있다.
따라서, 클라이언트 장치(100)에 있어서 DASH 클라이언트부(140)가 소정의 segmentURL에 의해 segment 취득 리퀘스트를 발행하면, 그것을 받은 프록시 서버부(130)가, ATSC 3.0 미들웨어(110)의 시그널링 리트리버(113)와 시그널링 파서(114)를 통해 취득, 분석된 SLS 시그널링 프래그먼트나 EFDT로부터 원하는 파일을 취득하여 재구성하고, DASH 클라이언트부(140)에 대한 리스폰스로서 재구성한 파일을 회신하게 된다.
한편, 동일한 파일을 인터넷 분배로부터 취득하는 경우에는, 도 21의 C에 나타낸 SegmentFile(파일 URL "bbSeg.1-1.1")에 HTTP 리퀘스트를 발행하고, 그것에 따라서 공급되는 파일을 취득하게 된다.
다음으로, 도 22는, MPD에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내고 있다.
분배측에 있어서는, DASH 서버가, Segment마다 분배 모드 정보를 기술함과 함께 ROI 식별자를 적절하게 저장한 MPD를 생성하여 방송 서버로 전송한다. 또한, DASH 서버가 콘텐츠 스트림의 Segment 파일을 생성하여 Web 서버로 전송함과 함께, 그 중 방송 분배 병용인 것에 대해서는 방송 서버로도 전송한다.
MPD가 전송된 방송 서버는, SLS 파일을 생성하고, 생성된 SLS 파일과 전송된 MPD를, 방송망을 통해 방송 분배한다. 또한, 방송 서버는, DASH 서버로부터 전송된 콘텐츠 스트림의 Segment 파일을 ROUTE의 FileMode에서 방송 분배한다.
수신측의 클라이언트 장치(100)에 있어서는, 방송 수신부(110)가 방송 분배된 MPD와 SLS 파일을 수신한다. 이후, DASH 클라이언트부(140)가, 방송 수신부(110)에 대해 MPD를 요구하면, 그 요구에 따라서 방송 수신부(110)가 DASH 클라이언트부(140)에 MPD를 공급한다. 또한, 방송 수신부(110)가 방송 분배된 MPD를 수신하고 있지 않은 경우, 통신부(120)가 DASH 서버에 HTTP 리퀘스트를 발행하여 인터넷 분배되는 MPD를 취득할 수 있다.
DASH 클라이언트부(140)에서는, MPD에 기재되어 있는 ROI 식별자 등에 기초하여, 요구하는 Segment를 선택할 수 있다. DASH 클라이언트부(140)가 MPD에 기초하여, 인터넷 분배되는 Segment를 요구한 경우, 통신부(120)가 당해 Segment를 요구하는 HTTP 리퀘스트를 Web 서버에 대해 발행하고, 그것에 따라서 Web 서버로부터 공급(인터넷 분배)된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는, 공급된 Segment를 재생한다.
또한, DASH 클라이언트부(140)가 MPD에 기초하여, 방송 분배되는 Segment를 요구한 경우, 방송 수신부(11)가 방송 분배된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는, 공급된 Segment를 재생한다.
이상으로, MPD에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스의 설명을 종료한다.
<MPD에 SegmentTemplate을 이용하는 경우의 대응>
그런데, 라이브 방송 등의 분배에 DASH를 이용하는 경우, SegmentList에 SegmentUrl을 열기하면 MPD의 데이터 사이즈가 극단적으로 커져 버린다(ATSC 3.0 등의 경우에는 Segment 단체의 시간이 0.5초 정도라고 상정하고 있음). 그래서 통상의 경우, MPD에는 SegmentTemplate이 이용된다.
도 23은, 도 17에 나타낸 MPD-SRD 표현을, SegmentTemplate을 이용하여 재기입한 것이다. 도 24는, 도 23의 MPD-SRD 표현을 가시화한 것이다. 단, 도 24에 있어서의 파선 프레임이나 1점 쇄선 프레임 내의 SegmentUrl이나 ROI 식별자는, 도 23의 MPD-SRD 표현으로는 기술할 수 없는 부분을 나타내고 있다.
MPD에 SegmentTemplate을 이용함으로써, MPD의 데이터 사이즈를 대폭 삭감할 수 있다. 단, SegmentTemplate은 Period 단위로 동일한 생성 규칙이 적용되므로, 개개의 Segment에 대해 상이한 속성(이 경우, 분배 모드 정보나 ROI 식별자)을 기술할 수 없다.
도 24와 도 16을 비교하여 명백한 바와 같이, SegmentTemplate을 이용한 경우, 동일 Period의 하위에 있는 시계열적으로 배열되는 Segment 시퀀스에 있어서, 어느 Segment에는 방송 분배 url과 인터넷 분배 url을 지정하고, 다른 Segment에는 인터넷 분배 url만을 지정하는 것과 같이 할 수 없다. 또한, 특정 Segment에 대해서만 ROI 식별자를 지정할 수 없다.
따라서, MPD에 SegmentTemplate을 이용하는 경우에는, 개개의 Segment에 대해 지정할 수 없는 분배 모드 정보나 ROI 식별자를, MPD 이외에 저장하여 수신측에 시그널링할 필요가 있다.
<USD에 분배 모드 정보와 ROI 식별자를 저장하는 경우>
다음으로, SLS 시그널링의 USD를 확장하여, 각 Segment의 분배 모드 정보와 ROI 식별자를 시그널링하는 방법에 대해 설명한다.
각 Segment의 분배 모드 정보에 대해서는, 종래의 USD에서도 시그널링할 수 있다.
USD는 MPD와 관련되어 있으며, USD의 bundleDescriptionROUTE/userServiceDescription/deliveryMethod/broadcastAppService/basePattern(방송 분배용 url 일치 패턴), 또는 .../unicastAppService/basePattern(인터넷 분배용 url 일치 패턴)으로 열거되어 있는 url의 일부(전부여도 됨)가 당해 Segment의 url과 일치할 때, 당해 Segment는 방송망의 ROUTE를 통한 방송 분배, 또는 CDN을 통한 인터넷 분배되는 것을 나타내게 된다.
또한, 방송 분배되는 Segment와 인터넷 분배되는 Segment가 동일한 것인 것은, bundleDescriptionROUTE/userServiceDescription/deliveryMethod/appService/identicalContent에 의해 그룹핑되어 있는 url의 세트를 사용하여 나타낼 수 있다.
도 25는, ROI 식별자를 저장하기 위해 USD를 확장한 구체적인 위치에 나타내고 있다. 도 25에 나타낸 바와 같이, ROI 식별자(roiId)에 대해서는, 각 Segment의 basePattern의 속성을 확장하여 ROI 식별자를 저장한다.
도 26은, 확장된 USD에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내고 있다.
도 26의 예에서는, USD의 userServiceDescription/deliveryMethod 하위의, 방송 분배 url의 매칭 패턴을 기재하는 broadcastAppService/basePattern에 "bcSeg.1-1.1"이 기재되고, 그 ROI 식별자로서 "roiId1"이 기재되어 있다. 한편, 인터넷 분배 url의 매칭 패턴을 기재하는 unicastAppService/basePattern에는 "bbSeg.1-1.1"이 기재되고, 그 ROI 식별자로서 "roiId1"이 기재되어 있다. 이것은, 어느 Segment에 대해 방송 분배와 인터넷 분배의 양쪽에서 동일한 ROI 식별자가 할당되어 있는 것을 의미한다. 그리고 이들 Segment군이 동일한 것인 것은, deliveryMethod/appService/identicalContent에 의해 그룹핑함으로써 나타낼 수 있다.
여기서, basePattern에 기재되는 매칭 패턴은, 통상, MPD에 기재되는 baseURL이나 SegmentURL의 일부(예를 들어, "http://a.com/bc" 등)가 기재되지만, 각 Segment에 대해 기재하는 경우는 SegmentURL의 전체(SegmentURL을 유니크하게 해결할 수 있는 부분까지)를 기재하게 된다. 따라서, 각 Segment의 ROI가 변화되는 경우는, Segment마다의 URL 세분도와 USD의 갱신 세분도가 동등해진다.
클라이언트 장치(100)에 있어서, ROI 계열을 추적하지 않고 Segment를 취득하는 경우, DASH 클라이언트부(140)는 프록시 서버부(130)에 대해 SegmentURL="bbSeg.1-1.1"(인터넷 분배 url)의 HTTP 리퀘스트를 통지하면, 이 통지가 방송 수신부(110)에 전달하고, 방송 수신부(110)에서는 bbSeg.1-1.1을 USD 중에서 검색하여, 대응하는 방송 분배 url인 "bcSeg.1-1.1"이, 컨포넌트 파일 세션상의 url인 것을 알면, 당해 Segment 파일을 방송 스트림으로부터 취득하여 DASH 클라이언트부(140)에 공급하게 된다.
한편, ROI 계열을 추적하여 Segment를 취득하는 경우, 방송 수신부(110)가 USD를 해석하여 얻은 Segment가 어느 ROI 계열에 속해 있는 것인지 나타내는 정보를 DASH 클라이언트부(140)에 통지할 필요가 있다. 이 통지에는, 도 8을 참조하여 상술한 DASH의 SAND 메시지 등이 이용된다.
구체적으로는, 상술한 바와 같이, SAND의 ResourceStatus 메시지의 ResourceStatus/Reason 요소에 방송 분배 병용 정보와 ROI 식별자를 저장할 수 있도록 한다. 단, 현재의 규정에서는, reason 요소에는 힌트 정보로서 임의의 문자열을 기재해도 되도록 되어 있지만, 어떠한 정보가 기재되어야 할지의 상세한 규정(데이터 구조와 시맨틱스의 규정)이 없다.
그래서 데이터 구조로서, 임의의 수신 상태 메타데이터를 저장할 수 있도록 SchemeIdUri(필수)와 Value(옵셔널)의 세트를 저장할 수 있도록 하는 것을 제안한다. SchemeIdUri에는, 수신 상태를 나타내는 데이터의 내용을 식별하는 URI를 지정하여, 그 URI에 규정되는 값의 내용을 value에 기재할 수 있도록 한다.
예를 들어, SchemeIdUri로서 방송 분배 병용임을 나타내는 "urn:atsc:BroadcastDelivery"라고 하는 URN을 규정하고, 또한 ROI 식별자를 저장하는 스킴으로서 "urn:atsc:roiValue"를 규정하여 ROI 식별자를 value 속성으로 저장한다.
도 27은, 방송 분배 병용 정보와 ROI 식별자를 저장한 ResourceStatus 메시지의 구체예를 나타내고 있다. 도 27의 A에 나타낸 바와 같이, ResourceStatus 메시지는, baseURL 요소와 Status 요소와 Reason 요소가 기재된다. 또한, Reason 요소에는, 도 27의 B에 나타낸 바와 같이, 분배 모드 정보와 ROI 식별자가 base64 인코드된 상태의 문자열로서 기재된다.
다음으로, 도 28은, USD에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내고 있다.
분배측에 있어서는, DASH 서버가, SegmentTemplate을 이용한 MPD를 생성하여 방송 서버로 전송한다. 또한, DASH 서버가 콘텐츠 스트림의 Segment 파일을 생성하여 Web 서버로 전송함과 함께, 그 중 방송 분배 병용인 것에 대해서는 방송 서버로도 전송한다.
MPD가 전송된 방송 서버는, 분배 모드 정보와 ROI 식별자를 저장한 USD를 포함하는 SLS 파일을 생성하고, 생성된 SLS 파일과 전송된 MPD를, 방송망을 통해 방송 분배한다. 또한, 방송 서버는, DASH 서버로부터 전송된 콘텐츠 스트림의 Segment 파일을 ROUTE의 FileMode에서 방송 분배한다.
수신측의 클라이언트 장치(100)에 있어서는, 방송 수신부(110)가, 방송 분배된 MPD와 SLS 파일을 수신한다. 이후, DASH 클라이언트부(140)가 방송 수신부(110)에 대해 MPD를 요구하면, 그 요구에 따라서 방송 수신부(110)가 DASH 클라이언트부(140)에 MPD를 공급한다. 또한, 방송 수신부(110)가 방송 분배된 MPD를 수신하고 있지 않은 경우, 통신부(120)가 DASH 서버에 HTTP 리퀘스트를 발행하여 인터넷 분배되는 MPD를 취득할 수 있다.
MPD가 공급된 DASH 클라이언트부(140)에서는, SegmentTemplate에 기초하여 완전한 SegmentURL을 복원함으로써 MPD를 재생성한다.
또한, 방송 수신부(110)는, USD를 해석하여 각 Segment의 분배 모드 정보와 ROI 식별자를 판단하고, 그 판단 결과를 프록시 서버부(130)에 통지한다. 프록시 서버부(130)는, Segment의 분배 모드 정보와 ROI 식별자를 저장한 ResourceStatus 메시지를 생성하여 DASH 클라이언트부(140)에 통지한다.
DASH 클라이언트부(140)에서는, MPD와 ResourceStatus 메시지에 기재되어 있는 ROI 식별자 등에 기초하여, 요구하는 Segment를 선택할 수 있다. DASH 클라이언트부(140)가 인터넷 분배되는 Segment를 요구한 경우, 통신부(120)가, 당해 Segment를 요구하는 HTTP 리퀘스트를 Web 서버에 대해 발행하고, 그것에 따라서 Web 서버로부터 공급(인터넷 분배)된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는, 공급된 Segment를 재생한다.
또한, DASH 클라이언트부(140)가 방송 분배되는 Segment를 요구한 경우, 방송 수신부(11)가, 방송 분배된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는, 공급된 Segment를 재생한다.
이상으로, USD에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스의 설명을 종료한다.
그런데, 상술한 바와 같이 USD를 사용하여 각 Segment의 분배 모드 정보와 ROI 식별자를 시그널한 경우, Segment 세분도(Segment 단위마다)에 의해 방송 분배 병용인지 여부가 변화될 때에는, 그 변화 시마다 USD를 갱신해야 한다. 그러나 USD는, 본래, 서비스(채널) 전체에 걸쳐 변화가 없는 속성을 시그널링하기 위해 도입되어 있어, 빈번하게 갱신이 필요해지는 운용은 상정되어 있지 않다(금지되어 있는 것은 아님). 그래서 USD를 사용하지 않고, 마찬가지의 시그널링을 행하는 2종류의 방법에 대해 이하의 (1) 및 (2)의 방법을 제안한다.
(1) ROUTE의 전송 모드가 FileMode인 경우, EFDT를 확장하여 ROI 식별자를 저장한다.
(2) ROUTE의 전송 모드가 EFDT를 이용하지 않는 EntityMode인 경우, Entity 헤더를 확장하여 동일 콘텐츠를 식별하는 url이나, ROI 식별자를 저장한다.
<EFDT의 확장>
각 Segment의 분배 모드 정보와 ROI 식별자는, S-TSID의 EFDT(각 컨포넌트 파일 세션 상에 그것이 기술하는 파일군과 함께 전송할 수 있는 시그널링 프래그먼트의 일부(단편))를 사용하여 시그널링할 수 있다.
도 29는, ROI 식별자를 저장하기 위해 EFDT를 확장한 구체적인 위치에 나타내고 있다. 도 29에 나타낸 바와 같이, efdtType/routesls:FDTParameters/File/atributes/Content-Location 속성에 RoiId와 Identical-Content-Location을 병렬로 추가한다.
도 30은, 확장된 EFDT에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내고 있다.
도 30에 나타낸 바와 같이, 당해 Segment가 생성된 근원이 되는 MPD와 관련되어 있는 USD의 bundleDescriptionROUTE/userServiceDescription@sTSIDUri로부터 참조되는 S-TSID 프래그먼트의 S-TSID/RS/LS/srcFlow/EFDT로부터 참조되는 컨포넌트 파일 세션 중의 EFDT에, 당해 Segment 파일의 파일 URL을 기재하기 위한 Content-Location 속성에 추가된 Identical-Content-Location에 인터넷 분배 url(도 30의 경우, bbSeg.1-1.1)을 기재하고, RoiId에 ROI 기술자(도 30의 경우 "roiid1)를 기재한다.
이 경우, 확장된 USD를 사용할 때와 마찬가지로, 클라이언트 장치(100)에 있어서, ROI 계열을 추적하지 않고 Segment를 취득할 때에는, DASH 클라이언트부(140)는 프록시 서버부(130)에 대해 SegmentURL="bbSeg.1-1.1"(인터넷 분배 url)의 HTTP 리퀘스트를 통지하면, 이 통지가 방송 수신부(110)에 전달되고, 방송 수신부(110)에서는 bbSeg.1-1.1을 EFDT 중에서 검색하여, 대응하는 방송 분배 url인 "bcSeg.1-1.1"이, 컨포넌트 파일 세션 상의 url인 것을 알면, 당해 Segment 파일을 방송 스트림으로부터 취득하여 DASH 클라이언트부(140)에 공급하게 된다.
한편, ROI 계열을 추적하여 Segment를 취득할 때에는, 방송 수신부(110)가 EFDT를 해석하여 얻은 Segment가 어느 ROI 계열에 속해 있는 것인지를 나타내는 정보를 DASH 클라이언트부(140)에 통지할 필요가 있다. 이 통지에는, 상술한 DASH의 SAND 메시지 등이 이용된다.
다음으로, 도 31은, EFDT에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내고 있다.
분배측에 있어서는, DASH 서버가, SegmentTemplate을 이용한 MPD를 생성하여 방송 서버로 전송한다. 또한, DASH 서버가 콘텐츠 스트림의 Segment 파일을 생성하여 Web 서버로 전송함과 함께, 그 중 방송 분배 병용인 것에 대해서는 방송 서버로도 전송한다.
MPD가 전송된 방송 서버는, 분배 모드 정보와 ROI 식별자를 저장한 EFDT를 포함하는 SLS 파일을 생성하고, 생성된 SLS 파일과 전송된 MPD를, 방송망을 통해 방송 분배한다. 또한, 방송 서버는, DASH 서버로부터 전송된 콘텐츠 스트림의 Segment 파일을 ROUTE의 FileMode에서 방송 분배한다.
수신측의 클라이언트 장치(100)에 있어서는, 방송 수신부(110)가, 방송 분배된 MPD와 SLS 파일을 수신한다. DASH 클라이언트부(140)가, 방송 수신부(110)에 대해 MPD를 요구하면, 그 요구에 따라서 방송 수신부(110)가 DASH 클라이언트부(140)에 MPD를 공급한다. 또한, 방송 수신부(110)가 방송 분배된 MPD를 수신하고 있지 않은 경우, 통신부(120)가 DASH 서버에 HTTP 리퀘스트를 발행하여 인터넷 분배되는 MPD를 취득할 수 있다.
MPD가 공급된 DASH 클라이언트부(140)에서는, SegmentTemplate에 기초하여 완전한 SegmentURL을 복원함으로써 MPD를 재생성한다.
또한, 방송 수신부(110)는, EFDT를 해석하여 각 Segment의 분배 모드 정보와 ROI 식별자를 판단하고, 그 판단 결과를 프록시 서버부(130)에 통지한다. 프록시 서버부(130)는 Segment의 분배 모드 정보와 ROI 식별자를 저장한 ResourceStatus 메시지를 생성하여 DASH 클라이언트부(140)에 통지한다.
DASH 클라이언트부(140)에서는, MPD와 ResourceStatus 메시지에 기재되어 있는 ROI 식별자 등에 기초하여, 요구하는 Segment를 선택할 수 있다. DASH 클라이언트부(140)가 인터넷 분배되는 Segment를 요구한 경우, 통신부(120)가 당해 Segment를 요구하는 HTTP 리퀘스트를 Web 서버에 대해 발행하고, 그것에 따라서 Web 서버로부터 공급(인터넷 분배)된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는 공급된 Segment를 재생한다.
또한, DASH 클라이언트부(140)가 방송 분배되는 Segment를 요구한 경우, 방송 수신부(11)가, 방송 분배된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는, 공급된 Segment를 재생한다.
이상으로, EFDT에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스의 설명을 종료한다.
<Entity 헤더의 확장>
각 Segment의 분배 모드 정보와 ROI 식별자는, 컨포넌트 파일 세션 중에 당해 파일을 EntityMode에서 전송하고, Entity 헤더를 확장함으로써 시그널링할 수 있다.
도 32는, 확장된 Entity 헤더에 대응하는 서비스 시그널링 트랜스포트 세션과 컴포넌트 파일 트랜스포트 세션의 구성을 나타내고 있다.
도 32에 나타낸 바와 같이, 당해 Segment가 생성된 근원이 되는 MPD와 관련되어 있는 USD의 bundleDescriptionROUTE/userServiceDescription@sTSIDUri로부터 참조되는 S-TSID 프래그먼트의 S-TSID/RS/LS@tsi로부터 참조되는 컨포넌트 파일 세션을 흐르는 당해 Segment 파일의 Entity 헤더 중에 Identical-Content-Location 요소와 ROI-id 요소를 마련하고, Identical-Content-Location에는 인터넷 분배 url(도 32의 경우, bbSeg.1-1.1)을 기재하고, ROI-id에는 ROI 식별자(도 32의 경우, roiId1)를 기재하도록 한다.
이 경우, 확장된 USD나 확장된 EFDT를 사용할 때와 마찬가지로, 클라이언트 장치(100)에 있어서, ROI 계열을 추적하지 않고 Segment를 취득할 때에는, DASH 클라이언트부(140)는 프록시 서버부(130)에 대해 SegmentURL="bbSeg.1-1.1"(인터넷 분배 url)의 HTTP 리퀘스트를 통지하면, 이 통지가 방송 수신부(110)에 전달하고, 방송 수신부(110)에서는 bbSeg.1-1.1을 바탕으로, 방송 스트림으로부터 취득한 EntityMode 분배의 파일군의 Entity 헤더 중에서 bbSeg.1-1.1에 대응하는 방송 분배 url인 "bcSeg.1-1.1"이, 컨포넌트 파일 세션 상의 url인 것을 알면, 당해 Segment 파일을 방송 스트림으로부터 취득하여 DASH 클라이언트부(140)에 공급하게 된다.
한편, ROI 계열을 추적하여 Segment를 취득할 때에는, 방송 수신부(110)가 Entity 헤더를 해석하여 얻은 Segment가 어느 ROI 계열에 속해 있는 것인지를 나타내는 정보를 DASH 클라이언트부(140)에 통지할 필요가 있다. 이 통지에는, 상술한 DASH의 SAND 메시지 등이 이용된다.
다음으로, 도 32는, Entity 헤더에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스를 나타내고 있다.
분배측에 있어서는, DASH 서버가, SegmentTemplate을 이용한 MPD를 생성하여 방송 서버로 전송한다. 또한, DASH 서버가, 분배 모드 정보와 ROI 식별자를 저장한 Entity 헤더를 생성함과 함께, 콘텐츠 스트림의 Segment 파일을 생성하여 Web 서버로 전송하고, 그 중 방송 분배 병용인 것에 대해서는 방송 서버로도 전송한다.
MPD가 전송된 방송 서버는, SLS 파일을 생성하고, 생성된 SLS 파일과 전송된 MPD를, 방송망을 통해 방송 분배한다. 또한, 방송 서버는, DASH 서버로부터 전송된 콘텐츠 스트림의 Segment 파일을 ROUTE의 EntityMode에서 방송 분배한다.
수신측의 클라이언트 장치(100)에 있어서는, 방송 수신부(110)가, 방송 분배된 MPD와 SLS 파일을 수신한다. DASH 클라이언트부(140)가, 방송 수신부(110)에 대해 MPD를 요구하면, 그 요구에 따라서 방송 수신부(110)가 DASH 클라이언트부(140)에 MPD를 공급한다. 또한, 방송 수신부(110)가 방송 분배된 MPD를 수신하고 있지 않은 경우, 통신부(120)가 DASH 서버에 HTTP 리퀘스트를 발행하여 인터넷 분배되는 MPD를 취득할 수 있다.
MPD가 공급된 DASH 클라이언트부(140)에서는, SegmentTemplate에 기초하여 완전한 SegmentURL을 복원함으로써 MPD를 재생성한다.
또한, 방송 수신부(110)는, Entity 헤더를 해석하여 각 Segment의 분배 모드 정보와 ROI 식별자를 판단하고, 그 판단 결과를 프록시 서버부(130)에 통지한다. 프록시 서버부(130)는, Segment의 분배 모드 정보와 ROI 식별자를 저장한 ResourceStatus 메시지를 생성하여 DASH 클라이언트부(140)에 통지한다.
DASH 클라이언트부(140)에서는, MPD와 ResourceStatus 메시지에 기재되어 있는 ROI 식별자 등에 기초하여, 요구하는 Segment를 선택할 수 있다. DASH 클라이언트부(140)가 인터넷 분배되는 Segment를 요구한 경우, 통신부(120)가, 당해 Segment를 요구하는 HTTP 리퀘스트를 Web 서버에 대해 발행하고, 그것에 따라서 Web 서버로부터 공급(인터넷 분배)된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는 공급된 Segment를 재생한다.
또한, DASH 클라이언트부(140)가 방송 분배되는 Segment를 요구한 경우, 방송 수신부(11)가 방송 분배된 당해 Segment를 수신하여 DASH 클라이언트부(140)에 공급한다. DASH 클라이언트부(140)는 공급된 Segment를 재생한다.
이상으로, Entity 헤더에 분배 모드 정보와 ROI 식별자를 저장한 경우에 있어서의 동작 시퀀스의 설명을 종료한다.
<클라이언트 장치(100)에 있어서의 ROI 식별자의 이용예>
상술한 바와 같이, 각 ROI 계열에 대응하는 메타데이터도 공급되는 경우, 클라이언트 장치(100)에서는 이들을 U/I에 이용할 수 있다. 도 34는, 각 ROI 계열에 대응하는 ROI 식별자와 메타데이터의 이용예를 나타내고 있다.
도 34의 A는, ROI가 설정되어 있는 인물(601)이 화면(600) 상에 표시될 때, 각각의 메타데이터(인물의 이름 등)의 표시 영역(602)을 인물(601)과 함께 이동시켜 표시하는 이용예이다. 이 이용예에서는, 예를 들어 인물(601X)을 포함하는 영역(603X)이 유저에 의해 지정된 경우, 화면(600)의 영상을, 인물(601X)을 중심으로 하여 확대하거나, 인물(601X)에 대해 설정되어 있는 ROI의 영상으로 전환하거나 할 수 있다.
도 34의 B는, ROI가 설정되어 있는 인물(601)이 화면(600) 상에 표시될 때, 그 메타데이터(인물의 이름 등)의 표시 영역(602)을 화면(600)의 끝에 집합적으로 표시하는 이용예이다. 이 이용예에서는, 예를 들어 인물(601Y)에 대응하는 메타데이터의 표시 영역(602Y)이 유저에 의해 선택된 경우, 화면(600)의 인물(601Y)이 강조 표시되거나(도 34의 B의 표시예에서는, 인물(601Y)의 주위에 점멸 표시되는 프레임(605)이 표시됨), 인물(601Y)을 중심으로 하여 확대하거나, 인물(601Y)에 대해 설정되어 있는 ROI의 영상으로 전환하거나 할 수 있다.
<다른 실시 형태>
그런데 상술한 일련의 처리는, 하드웨어에 의해 실행할 수도 있고, 소프트웨어에 의해 실행할 수도 있다. 일련의 처리를 소프트웨어에 의해 실행하는 경우에는, 그 소프트웨어를 구성하는 프로그램이, 컴퓨터에 인스톨된다. 여기서, 컴퓨터에는, 전용의 하드웨어에 내장되어 있는 컴퓨터나, 각종 프로그램을 인스톨함으로써, 각종 기능을 실행하는 것이 가능한, 예를 들어 범용의 퍼스널 컴퓨터 등이 포함된다.
도 35는, 상술한 일련의 처리를 프로그램에 의해 실행하는 컴퓨터의 하드웨어의 구성예를 나타내는 블록도이다.
당해 컴퓨터(1100)에 있어서, CPU(Central Processing Unit)(1101), ROM(Read Only Memory)(112), RAM(Random Access Memory)(1103)은, 버스(1104)에 의해 서로 접속되어 있다.
버스(1104)에는 또한, 입출력 인터페이스(1105)가 접속되어 있다. 입출력 인터페이스(1105)에는, 입력부(1106), 출력부(1107), 기억부(1108), 통신부(1109) 및 드라이브(1110)가 접속되어 있다.
입력부(1106)는, 키보드, 마우스, 마이크로폰 등으로 이루어진다. 출력부(1107)는, 디스플레이, 스피커 등으로 이루어진다. 기억부(1108)는, 하드 디스크나 불휘발성 메모리 등으로 이루어진다. 통신부(1109)는, 네트워크 인터페이스 등으로 이루어진다. 드라이브(1110)는, 자기 디스크, 광 디스크, 광자기 디스크, 또는 반도체 메모리 등의 리무버블 미디어(1111)를 구동한다.
이상과 같이 구성되는 컴퓨터(1100)에서는, CPU(1101)가, 예를 들어 기억부(1108)에 기억되어 있는 프로그램을, 입출력 인터페이스(1105) 및 버스(1104)를 통해, RAM(1103)에 로드하여 실행함으로써, 상술한 일련의 처리가 행해진다.
컴퓨터(1100)(CPU(1101))가 실행하는 프로그램은, 예를 들어 패키지 미디어 등으로서의 리무버블 미디어(1111)에 기록하여 제공할 수 있다. 또한, 프로그램은, 로컬 에어리어 네트워크, 인터넷, 디지털 위성 방송과 같은 유선 또는 무선의 전송 매체를 통해 제공할 수 있다.
컴퓨터(1100)에서는, 프로그램은, 리무버블 미디어(1111)를 드라이브(1110)에 장착함으로써, 입출력 인터페이스(1105)를 통해 기억부(1108)에 인스톨할 수 있다. 또한, 프로그램은, 유선 또는 무선의 전송 매체를 통해, 통신부(1109)에서 수신하여, 기억부(1108)에 인스톨할 수 있다. 그 밖에, 프로그램은, ROM(1102)이나 기억부(1108)에 미리 인스톨해 둘 수 있다.
또한, 컴퓨터(1100)가 실행하는 프로그램은, 본 명세서에서 설명하는 순서를 따라 시계열적으로 처리가 행해지는 프로그램이어도 되고, 병렬로, 혹은 호출이 행해졌을 때 등의 필요한 타이밍에 처리가 행해지는 프로그램이어도 된다.
또한, 본 기술의 실시 형태는, 상술한 실시 형태에 한정되는 것은 아니며, 본 기술의 요지를 일탈하지 않는 범위에 있어서 다양한 변경이 가능하다.
본 기술은 이하와 같은 구성도 취할 수 있다.
(1)
복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와,
상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와,
상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부
를 구비하는 분배 장치.
(2)
상기 통지부는, 상기 세그먼트 파일에 관한 상기 속성 정보로서, 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 어느 것에 의해 분배되는 것인지를 나타내는 분배 모드 정보를 수신측에 더 통지하는
상기 (1)에 기재된 분배 장치.
(3)
상기 통지부는, 상기 세그먼트 파일에 관한 상기 속성 정보를, DASH에 규정되어 있는 MPD에 기재하여 수신측에 통지하는
상기 (1) 또는 (2)에 기재된 분배 장치.
(4)
상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, USD에 기재하여 수신측에 통지하는
상기 (1) 또는 (2)에 기재된 분배 장치.
(5)
상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, EFDT에 기재하여 수신측에 통지하는
상기 (1) 또는 (2)에 기재된 분배 장치.
(6)
상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, Entity 헤더에 기재하여 수신측에 통지하는
상기 (1) 또는 (2)에 기재된 분배 장치.
(7)
상기 촬상 범위에는 하나 이상의 상기 ROI가 설정되는
상기 (1) 내지 (6) 중 어느 하나에 기재된 분배 장치.
(8)
상기 분배부는, 모두 상기 영역에 각각 대응하는 상기 영상 스트림의 세그먼트 파일을 인터넷 분배함과 함께, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일을 방송 분배하는
상기 (1) 내지 (7) 중 어느 하나에 기재된 분배 장치.
(9)
분배 장치의 분배 방법에 있어서,
상기 분배 장치에 의한,
복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와,
상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배 스텝과,
상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지 스텝
을 포함하는 분배 방법.
(10)
컴퓨터를,
복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와,
상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와,
상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부
로서 기능시키는 프로그램.
(11)
복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 해석부와,
상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구부와,
요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득부와,
취득된 상기 세그먼트 파일을 재생하는 재생부
를 구비하는 수신 장치.
(12)
상기 요구부는, 유저로부터의 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는
상기 (11)에 기재된 수신 장치.
(13)
상기 요구부는, 화면 상의 피사체를 지정하는 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는
상기 (12)에 기재된 수신 장치.
(14)
상기 요구부는, 피사체의 메타데이터를 선택하는 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는
상기 (12)에 기재된 수신 장치.
(15)
상기 속성 정보는, 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 어느 것에 의해 분배되는 것인지를 나타내는 분배 모드 정보를 더 포함하고,
상기 취득부는, 상기 분배 모드 정보에 기초하여, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는
상기 (11) 내지 (14) 중 어느 하나에 기재된 수신 장치.
(16)
상기 해석부에 의한 상기 속성 정보의 해석 결과는, SAND 메시지를 사용하여 상기 요구부에 통지되는
상기 (11) 내지 (15) 중 어느 하나에 기재된 수신 장치.
(17)
수신 장치의 수신 방법에 있어서,
상기 수신 장치에 의한,
복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 해석 스텝과,
상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구 스텝과,
요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득 스텝과,
취득된 상기 세그먼트 파일을 재생하는 재생 스텝
을 포함하는 수신 방법.
(18)
컴퓨터를,
복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 해석부와,
상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구부와,
요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득부와,
취득된 상기 세그먼트 파일을 재생하는 재생부
로서 기능시키는 프로그램.
(19)
분배 장치와 수신 장치를 포함하는 콘텐츠 분배 시스템에 있어서,
상기 분배 장치는,
복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와,
상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와,
상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부
를 구비하고,
상기 수신 장치는,
상기 분배 장치로부터 통지된 상기 속성 정보를 해석하는 해석부와,
상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구부와,
요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득부와,
취득된 상기 세그먼트 파일을 재생하는 재생부
를 구비하는
콘텐츠 분배 시스템.
10 : Broadcaster
11 : 방송망
12 : CDN
20 : LAN
100 : 클라이언트 장치
110 : 방송 수신부
120 : 통신부
130 : 프록시 서버부
140 : DASH 클라이언트부
300 : DANE
400 : DASH client
514 : ROI
1100 : 컴퓨터
1101 : CPU

Claims (19)

  1. 분배 장치로서,
    복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와,
    상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와,
    상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI(Region Of Interest)가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부
    를 구비하고,
    상기 통지부는, 상기 세그먼트 파일에 관한 상기 속성 정보로서, 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 어느 것에 의해 분배되는 것인지를 나타내는 분배 모드 정보를 수신측에 더 통지하고,
    상기 분배부는, 상기 영역에 각각 대응하는 상기 영상 스트림의 세그먼트 파일들 전부를 인터넷 분배에 의해 분배하고, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일을 방송 분배에 의해 분배하는, 분배 장치.
  2. 제1항에 있어서,
    상기 통지부는, 상기 세그먼트 파일에 관한 상기 속성 정보를, DASH에 규정되어 있는 MPD에 기재하여 수신측에 통지하는, 분배 장치.
  3. 제1항에 있어서,
    상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, USD에 기재하여 수신측에 통지하는, 분배 장치.
  4. 제1항에 있어서,
    상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, EFDT에 기재하여 수신측에 통지하는, 분배 장치.
  5. 제1항에 있어서,
    상기 통지부는, DASH에 규정되어 있는 MPD에 SegmentTemplate이 이용되는 경우, 상기 세그먼트 파일에 관한 상기 속성 정보를, Entity 헤더에 기재하여 수신측에 통지하는, 분배 장치.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 촬상 범위에는 하나 이상의 상기 ROI가 설정되는, 분배 장치.
  7. 분배 장치와 수신 장치를 포함하는 콘텐츠 분배 시스템으로서,
    상기 분배 장치는,
    복수의 영역으로 분할되어 있는 촬상 범위를 촬상하여 얻어지는 상기 영역마다의 영상 스트림을 세그먼트 파일화하는 세그먼트 파일화부와,
    상기 영역마다의 상기 영상 스트림의 세그먼트 파일을 인터넷 분배 또는 방송 분배 중 적어도 한쪽에 의해 수신측에 공급하는 분배부와,
    상기 촬상 범위에 하나 이상의 상기 영역으로 이루어지는 ROI가 설정된 경우, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일에 관한 속성 정보로서, 속하는 상기 ROI를 특정하기 위한 ROI 식별자를 수신측에 통지하는 통지부
    를 구비하고,
    상기 통지부는, 상기 세그먼트 파일에 관한 상기 속성 정보로서, 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 어느 것에 의해 분배되는 것인지를 나타내는 분배 모드 정보를 수신측에 더 통지하고,
    상기 분배부는, 상기 영역에 각각 대응하는 상기 영상 스트림의 세그먼트 파일들 전부를 인터넷 분배에 의해 분배하고, 상기 ROI를 이루는 영역에 대응하는 세그먼트 파일을 방송 분배에 의해 분배하고,
    상기 수신 장치는,
    상기 분배 장치로부터 통지된 상기 속성 정보를 해석하는 해석부와,
    상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 요구부와,
    요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 취득부와,
    취득된 상기 세그먼트 파일을 재생하는 재생부
    를 구비하는, 콘텐츠 분배 시스템.
  8. 수신 장치로서,
    회로를 포함하고, 상기 회로는,
    복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하고 - 상기 ROI 식별자는 단일의 문자열에 의해서만 정의됨 -,
    상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하고,
    분배 모드 정보에 기초하여, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하고,
    취득된 상기 세그먼트 파일을 재생하도록
    구성되는, 수신 장치.
  9. 제8항에 있어서, 상기 회로는,
    유저로부터의 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하도록 더 구성되는, 수신 장치.
  10. 제9항에 있어서,
    상기 속성 정보는, 상기 세그먼트 파일이 인터넷 분배 또는 방송 분배 중 어느 것에 의해 분배되는 것인지를 나타내는 분배 모드 정보를 더 포함하고,
    상기 회로는, 상기 분배 모드 정보에 기초하여, 요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하도록 더 구성되는, 수신 장치.
  11. 제9항에 있어서, 상기 회로는,
    SAND(Server and Network Assisted DASH) 메시지를 사용하여 상기 속성 정보의 해석 결과를 통지받는, 수신 장치.
  12. 제8항에 있어서, 상기 회로는,
    화면 상의 피사체를 지정하는 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하도록 더 구성되는, 수신 장치.
  13. 제8항에 있어서, 상기 회로는,
    피사체의 메타데이터를 선택하는 조작에 의해 특정되는 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하도록 더 구성되는, 수신 장치.
  14. 수신 장치의 수신 방법으로서,
    상기 수신 장치에 의한,
    복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적절한 세그먼트에 할당된 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 단계 - 상기 ROI 식별자는 단일의 문자열에 의해서만 정의됨 -,
    상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 단계,
    요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 단계, 및
    취득된 상기 세그먼트 파일을 재생하는 단계
    를 포함하는 수신 방법.
  15. 컴퓨터에 의해 실행될 때, 상기 컴퓨터로 하여금 방법을 수행하게 하는 컴퓨터 판독가능 명령어들이 저장되어 있는 비일시적 컴퓨터 판독가능 기록 매체로서,
    상기 방법은,
    복수의 영역으로 분할되어 있는 촬상 범위에 하나 이상의 영역으로 이루어지는 ROI가 설정되어 있는 경우, 상기 ROI를 이루는 영역에 대응하는 영상 스트림의 세그먼트 파일에 관한 속성 정보이며, 적절한 세그먼트에 할당된 적어도 속하는 상기 ROI를 특정하기 위한 ROI 식별자가 포함되어 있는 상기 속성 정보를 취득하여 해석하는 단계 - 상기 ROI 식별자는 단일의 문자열에 의해서만 정의됨 -,
    상기 속성 정보의 해석 결과에 기초하여, 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 요구하는 단계,
    요구된 상기 소정의 ROI 식별자에 대응하는 상기 세그먼트 파일을 인터넷 분배 또는 방송 분배를 통해 취득하는 단계, 및
    취득된 상기 세그먼트 파일을 재생하는 단계
    를 포함하는, 비일시적 컴퓨터 판독가능 기록 매체.
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
KR1020197004218A 2016-08-30 2017-08-17 분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램 및 콘텐츠 분배 시스템 KR102376204B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016167607 2016-08-30
JPJP-P-2016-167607 2016-08-30
PCT/JP2017/029488 WO2018043134A1 (ja) 2016-08-30 2017-08-17 配信装置、配信方法、受信装置、受信方法、プログラム、およびコンテンツ配信システム

Publications (2)

Publication Number Publication Date
KR20190042568A KR20190042568A (ko) 2019-04-24
KR102376204B1 true KR102376204B1 (ko) 2022-03-21

Family

ID=61300582

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197004218A KR102376204B1 (ko) 2016-08-30 2017-08-17 분배 장치, 분배 방법, 수신 장치, 수신 방법, 프로그램 및 콘텐츠 분배 시스템

Country Status (8)

Country Link
US (2) US10750243B2 (ko)
EP (1) EP3509310B1 (ko)
JP (1) JPWO2018043134A1 (ko)
KR (1) KR102376204B1 (ko)
CN (1) CN109644286B (ko)
CA (1) CA3034585A1 (ko)
MX (1) MX2019002296A (ko)
WO (1) WO2018043134A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111131515B (zh) * 2019-12-31 2022-07-15 武汉市烽视威科技有限公司 一种cdn边缘注入分发方法及系统
US11765428B2 (en) * 2021-04-07 2023-09-19 Idomoo Ltd System and method to adapting video size
EP4138401A1 (en) * 2021-08-17 2023-02-22 Nokia Technologies Oy A method, an apparatus and a computer program product for video encoding and video decoding
CN114500846B (zh) * 2022-02-12 2024-04-02 北京蜂巢世纪科技有限公司 现场活动观看视角切换方法、装置、设备及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015197815A1 (en) * 2014-06-27 2015-12-30 Koninklijke Kpn N.V. Determining a region of interest on the basis of a hevc-tiled video stream
US20160165276A1 (en) * 2013-08-29 2016-06-09 Panasonic Intellectual Property Corporation Of America Transmitting method, receiving method, transmitting apparatus, and receiving apparatus
WO2016122269A1 (ko) * 2015-01-29 2016-08-04 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110139130B (zh) * 2012-10-12 2022-09-20 佳能株式会社 流传输数据的方法、发送和接收视频数据的方法和设备
ITTO20130437A1 (it) * 2013-05-29 2014-11-30 Sisvel Technology Srl Metodo di elaborazione di un contenuto video ricevibile da una pluralità di piattaforme di distribuzione e relativo apparato di ricezione video
EP3062522A4 (en) * 2013-10-22 2017-07-05 Sharp Kabushiki Kaisha Display control device, delivery device, display control method, and display control system
JP6541309B2 (ja) * 2014-06-23 2019-07-10 キヤノン株式会社 送信装置、送信方法、及びプログラム
CA3013111C (en) * 2016-02-02 2022-08-30 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Scene section and region of interest handling in video streaming

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160165276A1 (en) * 2013-08-29 2016-06-09 Panasonic Intellectual Property Corporation Of America Transmitting method, receiving method, transmitting apparatus, and receiving apparatus
WO2015197815A1 (en) * 2014-06-27 2015-12-30 Koninklijke Kpn N.V. Determining a region of interest on the basis of a hevc-tiled video stream
WO2016122269A1 (ko) * 2015-01-29 2016-08-04 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Also Published As

Publication number Publication date
KR20190042568A (ko) 2019-04-24
EP3509310A1 (en) 2019-07-10
US20200351559A1 (en) 2020-11-05
US10750243B2 (en) 2020-08-18
CN109644286B (zh) 2021-08-17
CN109644286A (zh) 2019-04-16
CA3034585A1 (en) 2018-03-08
MX2019002296A (es) 2019-07-04
JPWO2018043134A1 (ja) 2019-06-24
US11252478B2 (en) 2022-02-15
EP3509310A4 (en) 2019-08-21
EP3509310B1 (en) 2020-09-30
US20190182550A1 (en) 2019-06-13
WO2018043134A1 (ja) 2018-03-08

Similar Documents

Publication Publication Date Title
JP6348251B2 (ja) 端末装置、受信方法、およびプログラム
JP6462566B2 (ja) 送信装置、送信方法、受信装置および受信方法
US11252478B2 (en) Distribution device, distribution method, reception device, reception method, program, and content distribution system
JP6258856B2 (ja) 放送システムにおける制御メッセージ構成装置及び方法
KR102499231B1 (ko) 수신 장치, 송신 장치 및 데이터 처리 방법
KR102443060B1 (ko) 정보 처리 장치 및 정보 처리 방법
US10893315B2 (en) Content presentation system and content presentation method, and program
JP6597604B2 (ja) 受信装置、送信装置、データ通信方法、およびデータ処理方法
JP2015002513A (ja) コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム
KR102533674B1 (ko) 수신 장치, 송신 장치 및 데이터 처리 방법
KR102123208B1 (ko) 콘텐츠 공급 장치, 콘텐츠 공급 방법, 프로그램, 단말 장치, 및 콘텐츠 공급 시스템
KR102319932B1 (ko) 수신 장치 및 수신 방법, 재생 장치 및 재생 방법, 공급 장치 및 공급 방법, 그리고 프로그램
KR101780247B1 (ko) 동적 적응 버퍼링 기반의 ott 데이터 처리 방법
KR102600762B1 (ko) Atsc 3.0 기반의 방송 콘텐츠 전송 장치 및 방법과, 방송 콘텐츠 수신 장치 및 방법
JPWO2018074265A1 (ja) 受信装置、送信装置、及び、データ処理方法
WO2018012315A1 (ja) 情報処理装置、及び、情報処理方法

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant