JP2017513280A - パノラマサービスのための放送信号送受信方法及び装置 - Google Patents

パノラマサービスのための放送信号送受信方法及び装置 Download PDF

Info

Publication number
JP2017513280A
JP2017513280A JP2016552583A JP2016552583A JP2017513280A JP 2017513280 A JP2017513280 A JP 2017513280A JP 2016552583 A JP2016552583 A JP 2016552583A JP 2016552583 A JP2016552583 A JP 2016552583A JP 2017513280 A JP2017513280 A JP 2017513280A
Authority
JP
Japan
Prior art keywords
video
field
stream
information
present
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016552583A
Other languages
English (en)
Other versions
JP6382329B2 (ja
Inventor
ソチン ファン
ソチン ファン
チョンヨル ソ
チョンヨル ソ
ヒョンムク オ
ヒョンムク オ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of JP2017513280A publication Critical patent/JP2017513280A/ja
Application granted granted Critical
Publication of JP6382329B2 publication Critical patent/JP6382329B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server
    • H04N21/6379Control signals issued by the client directed to the server or network components directed to server directed to encoder, e.g. for requesting a lower encoding rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167Position within a video image, e.g. region of interest [ROI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362Generation or processing of Service Information [SI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368Multiplexing of audio and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H04N21/4382Demodulation or channel decoding, e.g. QPSK demodulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region

Abstract

【課題】パノラマ放送サービスのための放送信号送受信方法及び/又は装置の提供に関する。【解決手段】本発明の一実施例に係る放送信号送信方法は、映像をエンコードするステップ、エンコードされた映像及び映像に関するシグナリング情報を一つの放送ストリームに多重化するステップ、ここで、シグナリング情報は、パノラマ映像に関するシグナリング情報を含む、多重化された放送ストリームを含む放送信号を生成するステップ、及び生成された放送信号を伝送するステップを含む。【選択図】図1

Description

本発明は、放送信号の送受信に関し、より詳細には、パノラマサービスのための放送信号の送受信方法及び/又は装置に関する。
デジタル技術及び通信技術の発展に伴い、放送、映画のみならず、インターネット及び個人メディアなどの多様な領域でオーディオ/ビデオ中心のマルチメディアコンテンツの普及及び需要が急速に拡大されている。さらに、放送及び映画を介して立体感を提供する3DTV/3D映画の普遍化と共に、事実感と現場感を提供する実感メディアに対する消費者の要求が増加している。また、ディスプレイ技術の発展と共に、家庭でのTV画面が大型化されるにつれて、HD級以上の高画質で実感のあるコンテンツを楽しもうとする消費が増加している。これによって、PostHDTV市場に備えて、3DTVと共にUHDTV(Ultra High Definition TV)などの実感放送が次世代の放送サービスとして関心を受けており、特に、UHD(Ultra High Definition)放送サービスに対する論議が増加している趨勢である。
一方、最近、3D、UHDコンテンツの出現以来、パノラマ映像に対する需要が展示館、ニュースルーム、屋外構造物を通じて漸次増加している趨勢である。3Dコンテンツの立体感の提供、UHDコンテンツの事実感の提供と共に、高品質のパノラマサービスは、既存のHD映像メディアに比べて広い画角を提供することによって、ユーザに極大化された現場感を提供する。しかし、このような最近の趨勢にもかかわらず、パノラマ映像の取得、生成及び再生と関連する標準は存在しておらず、少数の国内外の研究機関でのみ技術開発を進めている状況である。
現在、DTV受信機でパノラマ映像を見ようとすれば、リサイズされた小さい映像でのみ視聴が可能であるという問題が存在する。よって、原本状態の映像をそのまま見せるためには、任意のサイズのパノラマ映像を既存のDTVで歪曲無しでディスプレイできるようにする該当分野の研究が必要である。
本発明が達成しようとする技術的課題は、上述した問題を解決するためのものであって、視聴者に製作当時の原本状態のパノラマ映像を提供することにある。
さらに、本発明が達成しようとする技術的課題は、全体のパノラマ映像を一つ以上の映像に分割して伝送する方法を提供することにある。
さらに、本発明が達成しようとする技術的課題は、全体のパノラマ映像を受信機内で分離してディスプレイする方法を提供することにある。
さらに、本発明が達成しようとする技術的課題は、パノラマサービスを提供するための効率的なシグナリング方法を提供することにある。
本発明の一実施例に係る放送信号送信方法は、映像をエンコードするステップ、前記エンコードされた映像及び前記映像に関するシグナリング情報を一つの放送ストリームに多重化するステップ、ここで、前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含む、前記多重化された放送ストリームを含む放送信号を生成するステップ、及び前記生成された放送信号を伝送するステップを含むことができる。
好ましくは、前記映像に関するシグナリング情報は、現在視聴中の放送サービスに対応するパノラマ放送サービスに対する情報を示すイベント連結情報を含み、前記パノラマ映像に関するシグナリング情報は、前記パノラマ映像の構成を示すパノラマ構成情報を含むことができる。
好ましくは、前記エンコードするステップは、前記映像を一つ以上の映像に分割し、前記分割された映像をそれぞれエンコードすることができる。
好ましくは、前記エンコードするステップは、前記映像のうちユーザの関心領域(Region of Interest、ROI)に対する高画質映像を提供するためのROI(Region of Interest)追加情報をエンコードし、前記多重化するステップは、前記エンコードされた映像、前記映像に関するシグナリング情報及び前記エンコードされたROI追加情報を一つの放送ストリームに多重化することができる。
好ましくは、前記パノラマ構成情報は、前記分割された映像に対する情報を含むことができる。
好ましくは、前記パノラマ構成情報は、前記分割された映像の区画化現象(blocking artifact)を除去するためのフィルタリング情報を含むことができる。
好ましくは、前記パノラマ構成情報は、前記パノラマ映像を一つ以上の映像にクロップ(cropping)するための情報を含むことができる。
好ましくは、前記パノラマ構成情報は、前記関心領域の映像に対する情報を含むことができる。
本発明の他の一実施例に係る放送信号受信方法は、映像に対するストリーム及び前記映像に関するシグナリング情報を含む放送ストリームを受信するステップ、ここで、前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含む、前記受信した放送ストリームから前記映像に対するストリーム及び前記映像に関するシグナリング情報を抽出するステップ、及び前記抽出されたシグナリング情報を用いて前記抽出された映像に対するストリームをデコードするステップを含むことができる。
好ましくは、前記映像に関するシグナリング情報は、現在視聴中の放送サービスに対応するパノラマ放送サービスに対する情報を示すイベント連結情報を含み、前記パノラマ映像に関するシグナリング情報は、前記パノラマ映像の構成を示すパノラマ構成情報を含むことができる。
好ましくは、前記映像は一つ以上の映像に分割され、前記映像に対するストリームは、一つ以上の前記分割された映像に対するストリームを含み、前記デコードするステップは、前記抽出されたシグナリング情報を用いて前記分割された映像に対するストリームのそれぞれをデコードすることができる。
好ましくは、前記放送ストリームは、前記映像のうちユーザの関心領域(Region of Interest、ROI)に対する高画質映像を提供するためのROI(Region of Interest)追加情報に対するストリームを含み、前記抽出するステップは、前記受信した放送ストリームから前記映像に対するストリーム、前記ROI追加情報に対するストリーム及び前記映像に関するシグナリング情報を抽出し、前記デコードするステップは、前記抽出されたシグナリング情報を用いて前記抽出された映像に対するストリーム及び前記抽出されたROI追加情報に対するストリームをデコードすることができる。
好ましくは、前記パノラマ構成情報は、前記分割された映像に対する情報を含むことができる。
好ましくは、前記パノラマ構成情報は、前記分割された映像の区画化現象を除去するためのフィルタリング情報を含むことができる。
好ましくは、前記パノラマ構成情報は、前記パノラマ映像を一つ以上の映像にクロップするための情報を含むことができる。
好ましくは、前記パノラマ構成情報は、前記関心領域の映像に対する情報を含むことができる。
好ましくは、前記放送信号受信方法は、前記デコードされた映像に対するストリームをディスプレイするステップを含み、前記ディスプレイするステップは、ユーザからスクローリング(scrolling)要求を受信する場合、前記スクローリング要求によって移動した領域をディスプレイすることができる。
本発明の更に他の一実施例に係る放送信号送信装置は、映像をエンコードするエンコーダ、前記エンコードされた映像及び前記映像に関するシグナリング情報を一つの放送ストリームに多重化する多重化部、ここで、前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含み、前記多重化された放送ストリームを含む放送信号を生成する放送信号生成部、及び前記生成された放送信号を伝送する伝送部を含むことができる。
本発明の更に他の一実施例に係る放送信号受信装置は、映像に対するストリーム及び前記映像に関するシグナリング情報を含む放送ストリームを受信する受信部、ここで、前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含み、前記受信した放送ストリームから前記映像に対するストリーム及び前記映像に関するシグナリング情報を抽出する逆多重化部、及び前記抽出されたシグナリング情報を用いて前記抽出された映像に対するストリームをデコードするデコーダを含むことができる。
本発明によれば、製作当時の原本状態のパノラマ映像を視聴者に提供できるという効果がある。
本発明によれば、全体のパノラマ映像を一つ以上の映像に分割して伝送する方法を提供できるという効果がある。
本発明によれば、全体のパノラマ映像を受信機内で分離してディスプレイする方法を提供できるという効果がある。
本発明によれば、パノラマサービスを提供するための効率的なシグナリング方法を提供できるという効果がある。
本発明の一実施例に係る放送信号送信方法を示した図である。 本発明の一実施例に係るシナリオ1の構成を示した図である。 本発明の一実施例に係るシナリオ2の構成を示した図である。 本発明の一実施例に係るシナリオ3の構成を示した図である。 本発明の一実施例に係るシナリオ4の構成を示した図である。 本発明の一実施例に係るパノラマ映像を分割する方法を示した図である。 本発明の一実施例に係るシナリオ1のパノラマサービス構成を示した図である。 本発明の一実施例に係るシナリオ2のパノラマサービス構成を示した図である。 本発明の一実施例に係るシナリオ1ベースの分割されたパノラマ映像をエンコードしたストリームを多数の受信機がデコードする場合、スクローリングによる受信機の動作を示した図である。 本発明の一実施例に係るシナリオ1ベースの分割されたパノラマ映像をエンコードしたストリームを一つの受信機がデコードする場合、スクローリングによる受信機の動作を示した図である。 本発明の一実施例に係るパノラマ映像を多数のディスプレイサイズが同じ受信機でディスプレイする場合、スクローリング要求によるパノラマ映像の配置を示した図である。 本発明の一実施例に係るパノラマ映像を多数のディスプレイサイズが異なる受信機でディスプレイする場合、スケーリング(scaling)を用いたスクローリング要求によるパノラマ映像の配置を示した図である。 本発明の一実施例に係るパノラマ映像を多数のディスプレイサイズが異なる受信機でディスプレイする場合、クロッピング(cropping)を用いたスクローリング要求によるパノラマ映像の配置を示した図である。 本発明の一実施例に係るパノラマ映像を二つの受信機でディスプレイする場合、両受信機の動作を示した図である。 本発明の一実施例に係るシナリオ2ベースの一つのストリームにエンコードされた全体のパノラマ映像を受信機が受信する場合、スクローリングによる受信機の動作を示した図である。 本発明の一実施例に係るシナリオ4ベースのパノラマサービス構成を示した図である。 本発明の一実施例に係るpanorama_composition_infoの構成を示した図である。 本発明の一実施例に係るpanorama_service_typeの構成を示した図である。 本発明の一実施例に係るpanorama_composition_metadata()の構成を示した図である。 本発明の一実施例に係るsub_video_afd_bar()の構成を示した図である。 本発明の一実施例に係る全体のパノラマ映像を構成する部分映像のうちpanorama_view_priorityが高い映像をディスプレイする方法を示した図である。 本発明の一実施例に係るpanorama_filtering_metadata()の構成を示した図である。 本発明の一実施例に係るextraction_info_metadata()の構成を示した図である。 本発明の一実施例に係るシナリオ2をベースにしたビデオストリームの構成を示した図である。 本発明の一実施例に係るROI_info_metadata()の構成を示した図である。 本発明の一実施例に係るSDT(service description table)の構成を示した図である。 本発明の一実施例に係るEIT(Event Information Table)の構成を示した図である。 本発明の一実施例に係るEITに含まれたlinkage_descriptor()の構成を示した図である。 本発明の一実施例に係るlinkage_typeが0x0Eである場合、link_typeによるターゲットサービスのタイプを示した図である。 本発明の一実施例に係るadvanced_event_linkage_info()の構成を示した図である。 本発明の一実施例に係るPMT(program map table)の構成及びPMTに含まれるpanorama_composition_info()の位置を示した図である。 本発明の一実施例に係るTVCT(terrestrial virtual channel table)の構成を示した図である。 本発明の一実施例に係るCVCT(cable virtual channel table)の構成を示した図である。 本発明の一実施例に係るパノラマサービスのためのservice_typeの構成を示した図である。 本発明の一実施例に係るcomponent_list_descriptor()の構成を示した図である。 本発明の一実施例に係るstream_typeがベースストリームを示す場合、stream_info_details()の構成を示した図である。 本発明の一実施例に係るstream_typeがベースストリームでないストリームを示す場合、stream_info_details()の構成を示した図である。 本発明の一実施例に係るシナリオ1において、メイン受信機で全てのストリームをデコードし、サブ受信機にデコードされたストリームを伝達する場合の受信機の動作を示した図である。 本発明の一実施例に係るシナリオ1において、各受信機で分離されて割り当てられた各ストリームをデコードする場合の受信機の動作を示した図である。 本発明の一実施例に係るシナリオ2をベースにした受信機の動作を示した図である。 本発明の一実施例に係るシナリオ4において、メイン受信機で全てのストリームをデコードし、サブ受信機にデコードされたストリームを伝達する場合の受信機の動作を示した図である。 本発明の一実施例に係る放送信号受信方法を示した図である。 本発明の一実施例に係る放送信号送信装置の構成を示した図である。 本発明の一実施例に係る放送信号受信装置の構成を示した図である。
以下、添付の図面及び添付の図面に記載した内容を参照して本発明の実施例を詳細に説明するが、本発明が各実施例によって制限又は限定されることはない。
本明細書で使用される用語としては、本発明での機能を考慮しながら、可能な限り現在広く使用される一般的な用語を選択したが、これは、当分野に携わる技術者の意図、慣例又は新たな技術の出現などによって変わり得る。また、特定の場合は、出願人が任意に選定した用語もあり、この場合、該当する発明の説明部分でその意味を記載する。したがって、本明細書で使用される用語は、単純な用語の名称ではなく、その用語が有する実質的な意味と本明細書の全般にわたった内容に基づいて解釈すべきであることを明らかにしておく。
図1は、本発明の一実施例に係る放送信号送信方法を示した図である。
本発明の一実施例に係る放送信号送信方法は、次のような過程で処理することができる。
まず、本発明の一実施例に係るエンコーダは映像をエンコードすることができる(S1010)。本発明の一実施例に係る多重化部は、エンコードされた映像及び/又は映像に関するシグナリング情報を一つの放送ストリームに多重化することができる(S1020)。このとき、シグナリング情報は、パノラマ映像に関するシグナリング情報を含むことができる。本発明の一実施例に係る放送信号生成部は、多重化された放送ストリームを含む放送信号を生成することができる(S1030)。本発明の一実施例に係る伝送部は、生成された放送信号を伝送することができる(S1040)。このとき、伝送部は、地上波放送網、インターネット網及び/又はケーブル網を介して放送信号を伝送することができる。
本発明の他の一実施例によれば、映像に関するシグナリング情報は、現在視聴中の放送サービスに対応するパノラマ放送サービスに対する情報を示すイベント連結情報を含み、パノラマ映像に関するシグナリング情報は、パノラマ映像の構成を示すパノラマ構成情報を含むことができる。ここで、イベント連結情報はadvanced_event_linkage_infoを意味し得る。パノラマ構成情報はpanorama_composition_infoを意味し得る。これに対しては、図17及び図30の説明部分で詳細に説明する。
本発明の他の一実施例によれば、エンコーダは、映像を一つ以上の映像に分割し、分割された映像をそれぞれエンコードすることができる。このとき、映像はパノラマ映像を含むことができる。これに対しては、図2、図6及び図7の説明部分で詳細に説明する。
本発明の他の一実施例によれば、エンコーダは、映像のうち、ユーザの関心領域(Region of Interest、ROI)に対する高画質映像を提供するためのROI(Region of Interest)追加情報をエンコードすることができ、多重化部は、エンコードされた映像、映像に関するシグナリング情報及び/又はエンコードされたROI追加情報を一つの放送ストリームに多重化することができる。ここで、ROI追加情報はROIエンハンスメントデータを意味し得る。これに対しては、図5、図16及び図41の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、分割された映像に対する情報を含むことができる。ここで、分割された映像に対する情報はpanorama_composition_metadataを意味し得る。これに対しては、図17、図19及び図20の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、分割された映像の区画化現象を除去するためのフィルタリング情報を含むことができる。ここで、区画化現象を除去するためのフィルタリング情報はpanorama_filtering_metadataを意味し得る。これに対しては、図17及び図22の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、パノラマ映像を一つ以上の映像にクロップするための情報を含むことができる。ここで、クロップするための情報はextraction_info_metadataを意味し得る。これに対しては、図3、図8、図17、図23及び図38の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、関心領域の映像に対する情報を含むことができる。ここで、関心領域の映像に対する情報はROI_info_metadataを意味し得る。これに対しては、図17、図25及び図41の説明部分で詳細に説明する。
本発明の一実施例は、パノラマ映像の長所を極大化するための効率的なディスプレイのための方法を提供することができる。例えば、本発明の一実施例は、ROI(region of interest)領域のみを既存の受信機で受信する方法、多数の既存の受信機を用いて任意のサイズを有するパノラマビデオを効率的にディスプレイする方法、受信機でディスプレイできる領域以外にも、ユーザがスクローリングを通じて余剰領域を見ることができるようにする方法を提供することができる。
本発明の一実施例は、全体のパノラマ映像を一定サイズに分割してそれぞれエンコードし、これを各受信機に伝達し、多数の受信機で該当領域のパノラマ映像を出力できるようにすることができる。また、本発明の一実施例は、全体のパノラマ映像のうち一部領域の優先順位(priority)をシグナル(signaling)することによって、1台の既存のDTV受信機もパノラマ映像のうち一部領域をディスプレイできるようにすることができる(シナリオ1)。すなわち、シナリオ1は、分割されたパノラマ映像を一つのストリームで構成することができる。
本発明の他の一実施例は、全体のパノラマ映像とこれを分割できる座標値をシグナルし、一つのメイン(main)受信機で多数のサブ(sub)DTV受信機にクロップ(cropping)された映像を伝達させることができる。また、本発明の一実施例は、全ての受信機でパノラマ映像全体をデコードし、各受信機に合う該当領域のパノラマ映像を出力できるようにすることができる。また、本発明の一実施例は、1台の既存のDTV受信機でもクロップされた映像を視聴できるようにすることができる(シナリオ2)。すなわち、シナリオ2は、全体のパノラマ映像を一つのストリームで構成することができる。
本発明の他の一実施例は、ユーザのスクローリング要求を受ければ、デフォルト(default)領域をディスプレイしてから、スクローリング要求の分だけシフトされた映像をディスプレイさせることができる。多数の既存の16:9DTVでパノラマ映像を分割して出力している場合、これによって、残りの他のDTVでもスクローリングを連続的に自動的に行うことができる(シナリオ3)。シナリオ3によるサービスは、シナリオ1及び/又はシナリオ2をベースにして提供することができる。
本発明の他の一実施例は、ROI領域に対する高画質のサービスを提供するためにSHVC(scalable HEVC)を用いて向上層(enhancement layer)で一部領域のエンハンスメントデータを提供することができ、これに対するシグナリング情報を提供することができる(シナリオ4)。
本発明の他の一実施例は、視聴者が一般の放送イベントを視聴している場合、視聴中のイベントに対応するパノラマサービスがあるとき、リンケージディスクリプタ(linkage descriptor)を用いてパノラマサービスを提供することができる(シナリオ5)。
本発明の一実施例によれば、受信機は、既存の16:9画面比を有するDTVでも、パノラマの全体映像をリサイズすることなくディスプレイすることができる。本発明の一実施例は、パノラマ映像が含む一部のROI(region of interest)領域を一つのディスプレイ装置が出力できるようにすることができ、多数の既存のDTVがパノラマ映像を分割してディスプレイできるようにすることができる。
本発明の一実施例によれば、パノラマ映像がシナリオ1又は2の方法を用いて各受信機でディスプレイされるとき、ユーザのスクローリング要求が入力されれば映像をシフトさせ、選択的に映像をディスプレイすることができる。
本発明の一実施例によれば、ROI領域に対する追加データ(エンハンスメントデータ)を伝送する方法を通じて大きいデータの伝送無しで高画質の映像サービスを提供することができる。
本発明の一実施例によれば、パノラマ映像サービスと16:9画面比の映像サービスとを連結することができる。ここで、16:9画面比の映像サービスは、パノラマ映像で分割されたものであってもよく、既存の16:9画面比の映像サービスであってもよい。
図2は、本発明の一実施例に係るシナリオ1の構成を示した図である。
本発明の一実施例に係るシナリオ1は、任意のサイズの全体のパノラマ映像を任意のサイズに分割してエンコードし、これを各受信機に伝達し、多数の受信機で該当領域のパノラマ映像を出力できるようにすることができる。また、シナリオ1は、全体のパノラマ映像のうち一部領域のナンバリング(numbering)を通じて(又は一部領域をベースビュー(base view)と指定)既存のパノラマ映像全体をリサイズ無しでは出力できない受信機も、所望の領域をディスプレイできるようにすることができる。
本発明の一実施例によれば、この図面において実線で表示されたように、分割されてエンコードされたストリームは、いずれもメイン受信機に伝送することができる。メイン受信機は、伝送されたストリームをデコードした後、デコードされた各映像をサブ受信機に伝達することができる。
本発明の他の一実施例によれば、この図面において点線で表示されたように、分割されたそれぞれの映像に対してエンコードされた各ストリームをそれぞれサブ受信機及びメイン受信機に伝送することができる。サブ受信機及びメイン受信機は、伝送された各映像に対するストリームをデコードした後でディスプレイすることができる。
図3は、本発明の一実施例に係るシナリオ2の構成を示した図である。
本発明の一実施例に係るシナリオ2は、全体のパノラマ映像とこれをクロップできる座標値をシグナルすることができる。これによって、シナリオ2は、多数のDTV受信機が該当領域のパノラマ映像を分割して出力できるようにすることができる。シナリオ2は、既存のDTVのみを有している受信者にも一部のパノラマ映像をクロップして提供することができる。また、シナリオ2は、セカンドデバイス(second device)がクロップされた領域をディスプレイさせることができる。
本発明の一実施例によれば、この図面において実線3010で表示されたように、全体のパノラマ映像に対してエンコードされた一つのストリームはメイン受信機に伝送することができる。メイン受信機は、伝送されたストリームをデコードすることができ、クロップ(crop)座標を用いて全体のパノラマ映像のうち一部を抽出することができる。そして、メイン受信機は、抽出された一部の映像をサブ受信機に伝達することができる。
本発明の他の一実施例によれば、この図面において点線3020で表示されたように、全体のパノラマ映像に対してエンコードされたストリームは、全てのサブ受信機及びメイン受信機に伝送することができる。各受信機は、伝送されたストリームをデコードし、クロップ座標を用いてクロップし、各受信機で必要な映像をディスプレイすることができる。
本発明の他の一実施例によれば、この図面において他の点線3030で表示されたように、全体のパノラマ映像に対してエンコードされたストリームは、既存の受信機及び/又はセカンドデバイスに伝送することができる。既存の受信機及び/又はセカンドデバイスは、伝送されたストリームをデコードすることができ、クロップ座標を用いてクロップすることができ、クロップされた映像をディスプレイすることができる。
図4は、本発明の一実施例に係るシナリオ3の構成を示した図である。
本発明の一実施例に係るシナリオ3は、受信機がパノラマ映像のうち一部の領域をデフォルト領域に出力させ、ユーザのスクローリング要求がある場合、該当のスクローリング情報の分だけ座標値を移動し、該当領域をディスプレイさせることができる。
本発明の一実施例に係るスクローリング方法は、パノラマ映像をディスプレイするディスプレイの個数によって変わることもあり、エンコードされたストリームの個数によって変わることもある。
図5は、本発明の一実施例に係るシナリオ4の構成を示した図である。
本発明の一実施例に係るシナリオ4は、ROI領域に対する高画質のズームイン(zoomin)及びズームアウト(zoomout)機能を提供することができる。このために、シナリオ4は、SHVCの向上層を用いてパノラマ映像が含む一部領域に対するエンハンスメントデータを提供することができ、これに対するシグナリングを提供することができる。
この図面を見れば、パノラマ映像は、基本層(base layer)又は他の向上層のストリームにエンコード(HEVC Encoder)して伝送することができる。受信端は、エンコードされたストリームをデコード(HEVC Decoder)してディスプレイすることができる。一方、ROIに対するエンハンスメントデータは、向上層のストリームにエンコード(SHVC Encoder)して伝送することができる。受信端は、エンコードされたストリームをデコード(SHVC Decoder)してディスプレイすることができる。このとき、受信機は、ROI領域に対する情報(ROI_start_x、ROI_start_y、ROI_width及び/又はROI_height)を用いて受信したパノラマ映像のROI領域をクロップすることができ、受信したエンハンスメントデータを用いてROI領域に対して高画質の映像を提供することができる。ここで、SHVCはscalable HEVCの略称であって、HEVCをベースにするスケーラブル(scalable)コーデックに該当し得る。よって、SHVCはHEVCを含み、さらに、向上層ストリームをエンコード及び/又はデコードし、スケーラビリティ(scalability)機能を提供することができる。ここで、向上層は、基本層のHEVCストリームに含まれた情報を除いた付加情報(residual data)を有するストリームを含む層に該当し得る。
本発明の他の一実施例に係るシナリオ5は、視聴者が一般の放送イベントを視聴している場合、これと関連して対応するパノラマサービスがあれば、リンケージディスクリプタを用いてパノラマサービスを提供することができる。ここで、イベントは放送プログラムを意味し得る。
図6は、本発明の一実施例に係るパノラマ映像を分割する方法を示した図である。
本発明の一実施例によれば、パノラマ映像は、左側(left)、中央(center)及び右側(right)の形態に分割することができ、この図面に示したように、モザイク形態の多数の映像に分割することができる。
本発明の一実施例によれば、この図面に示したように、分割された各映像を一次元の形態にシグナルすることができ(6010)、二次元の座標値の形態にシグナルすることができる。このとき、番号を割り当てる順序は変わってもよい。
図7は、本発明の一実施例に係るシナリオ1のパノラマサービス構成を示した図である。
本発明の一実施例は、16:9画面比のフォーマットと互換できるサービス(service1)を中心にして、任意のサイズを有するパノラマ映像を一定領域に分割することができる。分割された映像は、それぞれエンコードして多数の受信機に伝送することができる。各受信機は、該当領域の映像をディスプレイすることができる。
パノラマ映像全体を多数の受信機にディスプレイするために、本発明の一実施例は、サービス1(service 1)に該当する映像7010、サービス2(service 2)に該当する映像7020、サービス3(service 3)に該当する映像7030及び/又はパノラマ構成情報(panorama composition information)を用いて各受信機に各サービス及び/又はパノラマサービスを提供することができる。
本発明の一実施例によれば、パノラマ映像のディスプレイが可能なビデオウォール(video wall)及び/又はサイネージ(signage)は、パノラマ構成情報を用いて原本状態のパノラマ映像を構成してディスプレイすることができる。ここで、ビデオウォールは、多数のビデオ画面を積んだ大型画面を意味し得る。サイネージは、ディスプレイ広告掲示板などの大型ディスプレイを意味し得る。
本発明の他の一実施例によれば、受信機は、既存の16:9画面比のDTVでパノラマ映像をリサイズすることなくディスプレイすることができ、この場合、分割された映像7010、7020、7030のうちユーザによって選択された映像のみをディスプレイすることができる。また、本発明の一実施例は、デフォルトに指定されたサービス1(service 1)を提供することができる。
図8は、本発明の一実施例に係るシナリオ2のパノラマサービス構成を示した図である。
本発明の一実施例は、任意のサイズを有するパノラマ映像を分割できるクロップ座標値をパノラマ映像と共に一つ以上の受信機に伝送することができる。各受信機は、全体のパノラマ映像を受信してデコードした後、クロップ座標値を用いて全体のパノラマ映像をクロップすることができる。
本発明の一実施例によれば、16:9画面比の受信機でパノラマ映像をリサイズすることなくディスプレイする場合、受信機は、クロップ座標値を含む抽出情報メタデータ(extraction info metadata)を用いてユーザが望む画面を選択し、これをディスプレイすることができる。このとき、受信機は、抽出情報メタデータに含まれた多数のクロップ座標のうちデフォルトに指定されたクロップ座標を用いて16:9サービスを提供することができる。ここで、受信機はDTVを意味し得る。
本発明の他の一実施例によれば、パノラマ映像全体を多数の受信機でディスプレイする場合、各受信機は、抽出情報メタデータを用いて全体のパノラマ映像を分割し、各受信機に該当する分割された映像をディスプレイすることができる。ここで、受信機はDTVを意味し得る。
本発明の他の一実施例によれば、パノラマ映像のディスプレイが可能なビデオウォール及び/又はサイネージは、抽出情報メタデータを無視し、パノラマ映像をディスプレイすることができる。
図9は、本発明の一実施例に係るシナリオ1ベースの分割されたパノラマ映像をエンコードしたストリームを多数の受信機がデコードする場合、スクローリングによる受信機の動作を示した図である。
本発明の一実施例によれば、シナリオ1又はシナリオ2を通じて構成されたパノラマ映像において、x軸に+Xだけ、y軸に+Yだけのスクローリング要求がある場合、受信機は、全体のパノラマ映像で右側にXの上方にYだけシフトされた映像をディスプレイすることができる。このとき、本発明の一実施例に係るシナリオ3(スクローリングによる受信機の動作)は、分割されたパノラマ映像を一つのストリームで構成するシナリオ1をベースにする場合と、全体のパノラマ映像を一つのストリームで構成するシナリオ2をベースにする場合において異なる方法によってサービスを提供することができる。
本発明の一実施例に係るシナリオ3は、シナリオ1をベースにするとしても、分割されたパノラマ映像をエンコードしたストリームを多数の受信機がデコードする場合と、分割されたパノラマ映像をエンコードしたストリームを一つの受信機がデコードする場合において異なる方法によってサービスを提供することができる。
この図面は、シナリオ1ベースの分割されたパノラマ映像をエンコードしたストリームを多数の受信機がデコードする場合、シナリオ3による受信機の動作を示した図である。
本発明の一実施例によって全体のパノラマ映像がいくつかの映像に分割され、各分割されたパノラマ映像がそれぞれのストリームに送信される場合(シナリオ1)、各受信機は、出力しなければならない各ストリームをデコードしてディスプレイすることができる。このとき、ユーザからスクローリング要求を受けた場合、各受信機は、デコードした映像のうちユーザがスクローリングを要求した部分だけの映像を分割して他の受信機に伝達したり、他の受信機から必要な映像を受け取ることができる。そして、この場合、ユーザがスクローリングを要求した部分だけの映像、すなわち、必要な映像は、IP(internet protocol)、UPnP(universal plug and play)、HDMI(high definition multimedia interface)などの方法を用いて伝達することができる。
本発明の一実施例によれば、この図面に示したように、全体のパノラマ映像は6個の映像に分割することができる。このとき、本発明の一実施例は、説明の便宜上、左側上端の映像から右側下端の映像まで1から6までの番号を付けることができる。各分割された映像は多数の受信機にそれぞれ伝達することができる。例えば、分割された1番及び2番の映像はそれぞれエンコードすることができ、エンコードされた各ストリームは受信機1に伝達することができる。同様に、分割された3番及び4番の映像は受信機2に伝達することができ、分割された5番及び6番の映像は受信機3に伝達することができる。このとき、ユーザのスクローリング要求がある場合、スクローリング要求を受けた受信機はメイン受信機になり、メイン受信機は、他のサブ受信機にスクローリング要求を伝達し、これに対するシグナリング情報を伝達することができる。例えば、左側から右側に移動するユーザのスクローリング要求がある場合、この図面において、受信機1は受信機1で元のディスプレイされていた映像のスクローリングによって移動した分だけの左側部分にバーデータ(bar data)を挿入することができ、スクローリングによって移動した分だけの右側部分(A領域)は受信機1でデコードするが、デコーディング後に受信機2の左側部分(A'領域)に移動して受信機2から出力することができる。受信機2は、受信機1からデコードされたA領域の映像を受け取ってディスプレイすることができ、受信機2で元のディスプレイされていた映像のスクローリングによって移動した分だけの右側部分(B領域)は受信機2でデコードするが、デコーディング後に受信機3の左側部分(B'領域)に移動して受信機3から出力することができる。受信機3は、受信機2からデコードされたB領域の映像を受け取ってディスプレイすることができ、受信機3で元のディスプレイされていた映像のスクローリングによって移動した分だけの右側部分はディスプレイされない場合がある。本発明の一実施例によれば、この図面において、受信機1は、受信機2にデコードされたA領域の映像及び/又はA領域に対する座標情報(幅及び/又は高さ)を伝達することができる。同様に、受信機2は、受信機3にデコードされたB領域の映像及び/又はB領域に対する座標情報を伝達することができる。
この図面は、シナリオ1ベースの分割されたパノラマ映像をエンコードしたストリームを多数の受信機がデコードする場合、シナリオ3(スクローリング)による受信機の動作を示した図である。
本発明の一実施例によって全体のパノラマ映像が多数の映像に分割され、各分割されたパノラマ映像がそれぞれのストリームに送信される場合(シナリオ1)、メイン受信機は全てのストリームを受信及びデコードすることができ、デコードされた全ての分割された映像をサブ受信機に伝達することができる。すなわち、本発明の一実施例は、メイン受信機で全ての映像をデコードして全体のパノラマ映像を構成し、各サブ受信機でディスプレイしなければならない映像を伝達する方法を示すので、結局、シナリオ2(クロッピング)のメイン受信機で全体のパノラマ映像をデコードして複数台の受信機に伝達する方法と同一であり得る。
各サブ受信機は、出力しなければならない映像をメイン受信機から受け取り、伝達された映像をディスプレイすることができる。このとき、ユーザからスクローリング要求を受ける場合、メイン受信機は、デコードした全体のパノラマ映像のうちユーザがスクローリングを要求した分だけ映像を移動させ、他のサブ受信機で出力するデコードされた映像をIP(internet protocol)、UPnP(universal plug and play)、HDMI(high definition multimedia interface)などの方法を用いてサブ受信機に伝達することができる。
本発明の一実施例によれば、この図面に示したように、全体のパノラマ映像は6個の映像に分割することができる。このとき、本発明の一実施例は、説明の便宜上、左側上端の映像から右側下端の映像まで1から6までの番号を付けることができる。各分割された映像はそれぞれエンコードすることができ、エンコードされた各ストリームは一つの受信機に伝達することができる。例えば、分割された1番〜6番の映像はそれぞれエンコードすることができ、エンコードされた各ストリームは全て受信機2に伝達することができる。このとき、ユーザのスクローリング要求がある場合、スクローリング要求を受けた受信機はメイン受信機になり、メイン受信機は、他のサブ受信機にスクローリング要求を伝達し、これに対するシグナリング情報を伝達することができる。例えば、左側から右側に移動するユーザのスクローリング要求がある場合、全体のパノラマ映像のうち各受信機でディスプレイされる映像は変更することができ、メイン受信機は全体のパノラマ映像をデコードし、各受信機でディスプレイされる各映像を再分割して各サブ受信機に伝達することができる。このとき、受信機1は、受信機1で元のディスプレイされていた映像のスクローリングによって移動した分だけの左側部分にバーデータを挿入することができ、受信機3で元のディスプレイされていた映像のスクローリングによって移動した分だけの右側部分はディスプレイされない場合がある。
図11は、本発明の一実施例に係るパノラマ映像を多数のディスプレイサイズが同じ受信機でディスプレイする場合、スクローリング要求によるパノラマ映像の配置を示した図である。
本発明の一実施例に係るメイン受信機(main display)は、メイン受信機に伝送されたストリームをスクローリング要求と関係なくデコードすることができる。その後、x軸に+Xだけ、y軸に+Yだけスクロールする要求が入ってくれば、メイン受信機は、(0,0)地点でx軸に+Xだけ、y軸に+Yだけ移動した地点からメイン受信機のディスプレイと同一の幅と高さを有する映像を出力することができる。例えば、この図面では、x軸に700だけ(左側方向)、y軸に0だけスクロールする場合に対するパノラマ映像の配置を示した。
本発明の一実施例によれば、サブ受信機(subdisplay 1、subdisplay2)でデコードされたが、メイン受信機又は他のサブ受信機でディスプレイされなければならない映像がある場合、映像をデコードしたサブ受信機は、デコードされた映像をディスプレイするメイン受信機又は他のサブ受信機に伝達することができる。同様に、メイン受信機でデコードされたが、他のサブ受信機でディスプレイされなければならない映像がある場合、映像をデコードしたメイン受信機は、デコードされた映像をディスプレイするサブ受信機に伝達することができる。
本発明の一実施例に係るサブ受信機(subdisplay 1、subdisplay 2)は、メイン受信機からユーザのスクローリング要求を受け取ることができる。サブ受信機は、受信したストリームをスクローリング要求と関係なくデコードすることができる。その後、x軸に+Xだけ、y軸に+Yだけスクロールする要求が入ってくれば、メイン受信機は、(0,0)地点でx軸に+Xだけ、y軸に+Yだけ移動した地点からメイン受信機のディスプレイと同一の幅と高さを有する映像を出力することができる。サブ受信機は、スクローリングによってサブ受信機のディスプレイに空き領域が生じる場合、サブ受信機の出力解像度及びスクローリング情報(scrolling info)をベースにしてバーデータを挿入することができる。ここで、バーデータとしてレターボックス(letter box)及び/又はピラーボックス(pillarbox)を挿入することができ、レターボックス及びピラーボックスを結合して挿入することができる。
本発明の一実施例に係るサブ受信機において、デコードしてはいないが、ディスプレイしなければならない映像がある場合、メイン受信機又は他のサブ受信機からデコードされた映像を受け取ることができる。
図12は、本発明の一実施例に係るパノラマ映像を多数のディスプレイサイズが異なる受信機でディスプレイする場合、スケーリングを用いたスクローリング要求によるパノラマ映像の配置を示した図である。
上述した多数のディスプレイサイズが同じ受信機でディスプレイする場合と異なり、本発明の他の一実施例は、各受信機のディスプレイサイズが異なるので、スケーリングダウン(scaling down)及び/又はスケーリングアップ(scaling up)段階を再度経ることができる。本発明の一実施例は、多数の受信機を使用するために、多重モニターを使用するときと同様にメイン受信機とサブ受信機との間でスクリーンサイズ及び/又は出力解像度に関する情報をやり取りし、多数の受信機が連結される位置を設定することができる。
本発明の一実施例に係るメイン受信機及びサブ受信機は、互いのスクリーンサイズ及び/又は出力解像度に関する情報をやり取りすることができる。このような情報交換は、最初の実行時にのみ行うことができる。本発明の一実施例によれば、ユーザがスクローリングを要求した受信機がメイン受信機になり、メイン受信機は、スクローリング関連情報を他の全てのサブ受信機に伝達することができる。
本発明の一実施例に係るメイン受信機(main display)は、メイン受信機に伝送されたストリームをスクローリング要求と関係なくデコードすることができる。その後、x軸に+Xだけ、y軸に+Yだけスクロールする要求が入ってくると、メイン受信機は、(0,0)地点でx軸に+Xだけ、y軸に+Yだけ移動した地点からメイン受信機のディスプレイと同一の幅と高さを有する映像を出力することができる。例えば、この図面では、x軸に700だけ(左側方向)、y軸に0だけスクロールする場合に対するパノラマ映像の配置を示した。
本発明の一実施例に係るメイン受信機のディスプレイサイズが他のサブ受信機のディスプレイサイズより大きい場合、メイン受信機から他のサブ受信機に送る映像は、サブ受信機の出力解像度及び/又はスクリーンサイズに基づいてスケールダウン(scaledown)して各サブ受信機に伝達することができる(12010)。その一方で、サブ受信機からメイン受信機に送る映像は、メイン受信機の出力解像度及び/又はスクリーンサイズに基づいてスケールアップ(scaleup)してメイン受信機に伝達することができる(12020)。
本発明の一実施例に係るサブ受信機(subdisplay 1、subdisplay 2)は、メイン受信機からユーザのスクローリング要求を受け取ることができる。サブ受信機は、受信したストリームをスクローリング要求と関係なくデコードすることができる。その後、x軸に+Xだけ、y軸に+Yだけスクロールする要求が入ってくると、メイン受信機は、(0,0)地点でx軸に+Xだけ、y軸に+Yだけ移動した地点からメイン受信機のディスプレイと同一の幅と高さを有する映像を出力することができる。サブ受信機は、スクローリングによってサブ受信機のディスプレイに空き領域が生じる場合、サブ受信機の出力解像度及びスクローリング情報をベースにしてバーデータを挿入することができる。ここで、バーデータとしてレターボックス及び/又はピラーボックスを挿入することができ、レバーボックス及びピラーボックスを結合して挿入することができる。
図13は、本発明の一実施例に係るパノラマ映像を多数のディスプレイサイズが異なる受信機でディスプレイする場合、クロッピングを用いたスクローリング要求によるパノラマ映像の配置を示した図である。
上述したスケーリングを用いたスクローリング要求によるパノラマ映像の配置と異なり、本発明の他の一実施例は、デコードされた映像をスケーリング過程無しでディスプレイサイズに合わせてクロップして各受信機に配置することができる。
本発明の一実施例に係るサブ受信機(subdisplay 1、subdisplay 2)は、分割されたストリームを受信し、各受信機の出力解像度、多数の受信機が連結される座標値、多数の受信機のディスプレイサイズ及び/又はスクローリング情報を用いて、受信された分割されたストリームをデコードした後、サブ受信機のディスプレイサイズに合わせて映像をクロップすることができる。
ユーザのスクローリング要求がある場合、本発明の一実施例は、各受信機の出力解像度、多数の受信機が連結される座標値、多数の受信機のディスプレイサイズ及び/又はスクローリング情報を用いてメイン受信機から出力していた1番の映像13010をクロップして捨てることができる。サブ受信機でサブ受信機のディスプレイサイズに合わせるために捨てられた2番の映像13020は、デコーディング後に捨てなく、3番の映像13030と共にメイン受信機に伝達することができる。例えば、この図面では、x軸に700だけ(左側方向)、y軸に0だけスクロールする場合に対するパノラマ映像の配置を示した。
図14は、本発明の一実施例に係るパノラマ映像を二つの受信機でディスプレイする場合の両受信機の動作を示した図である。
本発明の一実施例によれば、ユーザからスクローリング要求を受け取った受信機はメイン受信機であってもよく、残りの他の受信機はサブ受信機であってもよい。
本発明の一実施例によれば、メイン受信機とサブ受信機は、相互間でターゲットディスプレイサイズ(target display size)及び/又は出力解像度情報を交換することができる。ここで、ターゲットディスプレイサイズは、メイン受信機及び/又はサブ受信機のディスプレイサイズを示すことができる。メイン受信機とサブ受信機は、分割されたパノラマ映像に対するストリームをそれぞれ受信することができ、受信された各ストリームをデコードすることができる。その後、x軸に+Xだけ、y軸に+Yだけ移動((x,y)>(x',y'))するようにスクローリング要求がある場合、メイン受信機はスクローリング要求を受信し、スクローリング情報をサブ受信機に伝達することができる。メイン受信機は、スクローリング情報及び/又はターゲットディスプレイ情報を用いてメイン受信機でデコードしたストリームに対する映像を分離した後、これをサブ受信機に伝達することができる。同様に、サブ受信機は、スクローリング情報及び/又はターゲットディスプレイ情報を用いてサブ受信機でデコードしたストリームに対する映像を分離した後、これをメイン受信機に伝達することができる。ここで、ターゲットディスプレイ情報は、ターゲットディスプレイサイズ及び/又は出力解像度情報を含むことができる。デコードしたストリームに対する映像を分離する方法は、上述したスケーリング及び/又はクロッピング方法を含むことができる。
図15は、本発明の一実施例に係るシナリオ2ベースの一つのストリームにエンコードされた全体のパノラマ映像を受信機が受信する場合、スクローリングによる受信機の動作を示した図である。
本発明の一実施例に係るシナリオ2は、全体のパノラマ映像が一つのストリームで構成され、クロップ座標を用いて全体のパノラマ映像が多数の映像に分割される場合を示すことができる。
シナリオ2によれば、一つの受信機が全体のパノラマ映像に対するストリームを全てデコードした後、クロップ座標を用いて全体のパノラマ映像を分割し、他の受信機に分割された映像を伝達することができる(シナリオ21)。そして、全ての受信機が全体のパノラマ映像に対するストリームを全てデコードした後、クロップ座標を用いて各受信機でディスプレイする領域のみを出力することができる(シナリオ22)。
上述したシナリオ21の場合、ユーザのスクローリング要求があれば、本発明の一実施例は、ユーザのスクローリング要求によってクロップ座標値を移動させることができる((x,y)>(x',y'))。本発明の一実施例は、クロップ座標値によって全体のパノラマ映像をクロップすることができる。メイン受信機は、クロップされて分割された映像をサブ受信機に伝達することができる。そして、サブ受信機は、伝達された分割された映像をディスプレイすることができる。
上述したシナリオ22の場合、ユーザのスクローリング要求があれば、スクローリング要求を受け取ったメイン受信機が他のサブ受信機にスクローリング情報を伝達することができる。全ての受信機は、全体のパノラマ映像をデコードすることができる。各受信機は、ユーザのスクローリング要求によってクロップ座標値を移動させ、クロップ座標値によって全体のパノラマ映像をクロップすることができる。そして、クロップされて分割された映像をディスプレイすることができる。
図16は、本発明の一実施例に係るシナリオ4ベースのパノラマサービス構成を示した図である。
本発明の一実施例に係るシナリオ4は、ROI領域に対する高画質のサービスを提供するためにSHVC(scalable HEVC)を用いて向上層で一部の領域のエンハンスメントデータを提供することができ、これに対するシグナリング情報を提供することができる。
本発明の一実施例は、パノラマ映像のうちROI領域を指定することができ、ROI領域に対して既存の基本層信号に追加されるエンハンスメントデータを向上層にエンコードして伝送することができる。パノラマ映像が低画質である場合、ROI領域の映像に対して高画質のサービスを提供するためにエンハンスメントデータを用いることができる。これによって、本発明の一実施例は、高画質のROI領域を含むパノラマサービスを提供することができる。
この図面に示した、ROIのための付加データ(residual data for ROI)は、エンハンスメントデータと同一の意味を示すことができ、ROI領域の幅、高さ、及び開始点座標(x,y)を含むことができる。
図17は、本発明の一実施例に係るpanorama_composition_infoの構成を示した図である。
本発明の一実施例に係るpanorama_composition_infoは、SEI(supplemental enhancement information)メッセージに含ませて伝送することができる。panorama_composition_infoは、panorama_composition_informationと命名することができる。
本発明の一実施例に係るpanorama_composition_infoは、panorama_service_typeフィールド、panorama_composition_info_verフィールド、panorama_width_div32フィールド、panorama_height_div32フィールド、panorama_profileフィールド、panorama_levelフィールド、panorama_tierフィールド、panorama_stream_numフィールド、panorama_view_numフィールド、panorama_view_priorityフィールド、included_stream_idフィールド、panorama_composition_metadata()フィールド、panorama_filtering_metadata()フィールド、cropping_region_numフィールド、extraction_info_metadata()フィールド、ROI_numフィールド、ROI_codec_typeフィールド及び/又はROI_info_metadata()フィールドを含むことができる。
panorama_service_typeフィールドは、該当プログラムが如何なる比率で構成されたパノラマ映像サービスであるのかを示すことができる。これに対しては後で詳細に説明する。
panorama_composition_info_verフィールドは、panorama_composition_infoのバージョン番号を示すことができる。本発明の一実施例は、panorama_composition_infoのデータの一部が変更される場合、バージョン番号を「1」ずつ増加させ、アップデートバージョン(update version)であることを示すことができる。
panorama_width_div32フィールドは、原本のパノラマ映像の解像度をシグナルするための幅を示すことができる。実際の幅値は、このフィールド値に32を掛けた値であり得る。この図面に示していないが、panorama_composition_infoは、画面比(aspect ratio)情報を含むpanorama_aspect_ratioフィールドを含むことができる。
panorama_height_div32フィールドは、原本のパノラマ映像の解像度をシグナルするための高さを示すことができる。実際の高さ値は、このフィールド値に32を掛けた値であり得る。
panorama_profileフィールドは、全体のパノラマ映像に対するプロファイル情報を示すことができる。
panorama_levelフィールドは、全体のパノラマ映像に対するレベル情報を示すことができる。
panorama_tierフィールドは、全体のパノラマ映像に対するティア情報を示すことができる。ここで、使用されるコーデック(codec)の種類によってティアの概念は使用されない場合がある。ティアを使用しない場合はメインティア(main tier)と同一にシグナルすることができる。
panorama_stream_numフィールドは、panorama_service_typeが1である場合、全体のパノラマ映像が分離されたストリームの個数を示すことができる。
panorama_view_numフィールドは、panorama_service_typeが1である場合、全体のパノラマ映像がいくつの受信機に分離されて伝達されるのかを示すことができる。
panorama_view_priorityフィールドは、panorama_service_typeが1である場合、分離された多数の映像の優先順位を示すことができる。例えば、1台の受信機のみを有している場合、優先順位が最も高いビュー(映像)を出力することができる。
included_stream_idフィールドは、panorama_service_typeが1である場合、分離されたパノラマ映像のidを示すことができる。このフィールドは、受信機でディスプレイされる映像がいずれの映像であるのかを識別することができる。本発明の一実施例は、分離されたストリームの個数によってマスクビットを割り当てることができる。例えば、panorama_view_numフィールドが示す値が10である場合、すなわち、全体のパノラマ映像が10個のストリームに分離された映像である場合、このフィールドには10ビットを割り当てることができる。
panorama_composition_metadata()フィールドに対しては後で詳細に説明する。
panorama_filtering_metadata()フィールドに対しては後で詳細に説明する。
cropping_region_numフィールドは、panorama_service_typeが2である場合、全体のパノラマ映像を分離できるクロップ座標値の個数を示すことができる。panorama_composition_infoは、該当ストリームがパノラマ映像を多数の領域にクロップできるように構成されたストリームであるか否かを示すことができるcropping_flagフィールドを含むことができる。
extraction_info_metadata()フィールドに対しては後で詳細に説明する。
ROI_numフィールドは、panorama_service_typeが4である場合、ROI領域の個数を示すことができる。
ROI_codec_typeフィールドは、使用されるコーデックの種類を示すことができる。本発明の一実施例によれば、高画質のROI領域のサービスを提供するためにハイダイナミックレンジ(high dynamic range)サービスやカラーガマット(color gamut)関連サービスを提供するためにはスケーラブルコーデック(scalable codec)であるS(H)VCを用いることができる。そして、既存のサービスは60pであるが、120pの時間スケーラビリティ(temporal scalability)サービスを提供する場合は、HEVC(AVC)コーデックでサービスを提供することができる。よって、使用されるコーデックの種類を示すフィールドが必要である。
ROI_info_metadata()フィールドに対しては後で詳細に説明する。
図18は、本発明の一実施例に係るpanorama_service_typeの構成を示した図である。
この図面を見ると、panorama_service_typeが001である場合、これは、本発明の一実施例に係るシナリオ1のサービスが提供されることを示すことができる。シナリオ1は、パノラマ映像を既存の受信機で互換可能な形態に分離したサービスを示すことができる。panorama_service_typeが010である場合、これは、本発明の一実施例に係るシナリオ2のサービスが提供されることを示すことができる。シナリオ2は、全体のパノラマ映像及び抽出情報(extraction information)を含むサービスを示すことができる。panorama_service_typeが011である場合、これは、本発明の一実施例に係るシナリオ4のサービスが提供されることを示すことができる。シナリオ4は、ROI領域に対する高画質の映像を提供できるサービスを示すことができる。
図19は、本発明の一実施例に係るpanorama_composition_metadata()の構成を示した図である。
本発明の一実施例に係るpanorama_composition_metadata()は、sub_video_profileフィールド、sub_video_levelフィールド、sub_video_tierフィールド、sub_video_aspect_ratioフィールド、sub_video_width_div8フィールド、sub_video_height_div8フィールド、sub_video_stream_idフィールド及び/又はsub_video_afd_bar()フィールドを含むことができる。
sub_video_profileフィールドは、領域別に分離されたビデオストリームのプロファイル情報を示すことができる。分離されたビデオストリームのプロファイル情報が全体のパノラマ映像のストリームと同一であれば、別途にシグナルする必要なく、全体のパノラマ映像のストリームと同一であるというシグナリングに取り替えることができる。
sub_video_levelフィールドは、領域別に分離されたビデオストリームのレベル情報を示すことができる。分離されたビデオストリームのレベル情報が全体のパノラマ映像のストリームと同一であれば、別途にシグナルする必要なく、全体のパノラマ映像のストリームと同一であるというシグナリングに取り替えることができる。
sub_video_tierフィールドは、領域別に分離されたビデオストリームのティア情報を示すことができる。分離されたビデオストリームのティア情報が全体のパノラマ映像のストリームと同一であれば、別途にシグナルする必要なく、全体のパノラマ映像のストリームと同一であるというシグナリングに取り替えることができる。
sub_video_aspect_ratioフィールド、sub_video_width_div8フィールド、sub_video_height_div8フィールドは、領域別に分離されたビデオストリームの解像度(resolution)情報である画面比、幅及び高さ情報を示すことができる。本発明の一実施例によれば、画面比情報は解像度情報を通じて類推できるので、sub_video_aspect_ratioフィールドはpanorama_composition_metadata()に含まれない場合がある。
sub_video_stream_idフィールドは、領域別に分離されたビデオストリームを識別することができる。映像分割方法と関連して上述したように、当該フィールド値は2次元又は1次元座標値を示すことができる。2次元座標値に割り当てられる場合、割り当てられた2次元座標値を1次元座標値にマップすることができる。2次元座標値に割り当てられる場合、本発明の一実施例は、領域別に分離されたビデオストリームをsub_video_stream_id_x、sub_video_stream_id_yに区分してシグナルすることができる。本発明の一実施例によれば、panorama_composition_metadata()は、sub_video_view_directionフィールドを含むことができる。sub_video_view_directionフィールドは、sub_video_stream_idフィールドと共にシグナルすることができる。sub_video_view_directionフィールドに含まれた方向(direction)情報を通じて、本発明の一実施例は、全体のパノラマ映像の分離された各映像のうち左側、中央、右側の映像を区分し、いずれの方向の何番目の映像であるのかをシグナルすることができる。
sub_video_afd_bar()フィールドに対しては後で詳細に説明する。
図20は、本発明の一実施例に係るsub_video_afd_bar()の構成を示した図である。
本発明の一実施例に係るsub_video_afd_bar()は、sub_video_afd_start_x_div4フィールド、sub_video_afd_start_y_div4フィールド、sub_video_afd_width_div4フィールド及び/又はsub_video_afd_height_div4フィールドを含むことができる。
sub_video_afd_start_x_div4フィールド、sub_video_afd_start_y_div4フィールドは、sub_video_stream_idに該当するアクティブフォーマット(active format)の開始座標(x,y)値を示すことができる。
sub_video_afd_width_div4フィールド、sub_video_afd_height_div4フィールドは、sub_video_afd_start_x_div4フィールド及びsub_video_afd_start_y_div4フィールドが示す座標値から始まるアクティブフォーマットの幅及び高さ値を示すことができる。実際の幅及び高さ値は、各フィールドが示す値を4倍した値であり得る。
図21は、本発明の一実施例に係る全体のパノラマ映像を構成する部分映像のうちpanorama_view_priorityが高い映像をディスプレイする方法を示した図である。
本発明の一実施例によれば、上述したpanorama_view_priorityフィールドが含む情報及びincluded_stream_idフィールドが含む情報を用いて受信機でディスプレイされる映像を決定することができる。本発明の一実施例によれば、上述したsub_video_aft_bar()フィールドに含まれた情報を用いてディスプレイされる映像のいずれの部分がディスプレイされるのかを決定することができる。
図22は、本発明の一実施例に係るpanorama_filtering_metadata()の構成を示した図である。
本発明の一実施例によれば、分離されたパノラマストリームをスティッチ(stich)するとき、フィルタリング(filtering)過程をさらに含ませることができる。本発明の一実施例に係るpanorama_filtering_metadata()は、上述したフィルタリング過程に必要な情報を含むことができる。本発明の一実施例によれば、パノラマ映像を分離してエンコードした後でデコードする場合、映像の境界面に区画化現象が存在するのでフィルタリングを適用する必要がある。
本発明の一実施例に係るpanorama_filtering_metadata()は、panorama_filtering_numフィールド、panorama_filtering_cordinate_x_div4フィールド、panorama_filtering_cordinate_y_div4フィールド、panorama_filtering_width_div4フィールド、panorama_filtering_height_div4フィールド及び/又はsmoothing_filter_coeff()フィールドを含むことができる。
panorama_filtering_numフィールドは、フィルタリングの適用有無及び/又はフィルタリング個数を示すことができる。
panorama_filtering_cordinate_x_div4フィールド、panorama_filtering_cordinate_y_div4フィールドは、フィルタリングを適用する部分の1番目のピクセル座標を示すことができる。実際の座標は、このフィールドが示す値に4を掛けた値であり得る。ここで、実際の座標は、復元された全体のパノラマ映像を基準にすることができる。
panorama_filtering_width_div4フィールド、panorama_filtering_height_div4フィールドは、フィルタリングを適用しなければならない領域のサイズ(幅及び/又は高さ)を示すことができる。実際のサイズは、このフィールドが示す値に4を掛けた値であり得る。
smoothing_filter_coeff()フィールドは、コンテンツ別に最も適した平滑化フィルタ係数(smoothing filter coefficient)値を示すことができる。
図23は、本発明の一実施例に係るextraction_info_metadata()の構成を示した図である。
本発明の一実施例に係るextraction_info_metadata()は、sub_video_width_div8フィールド、sub_video_height_div8フィールド、sub_video_aspect_ratioフィールド、sub_video_view_idフィールド、sub_video_priorityフィールド、sub_video_cropping_start_x_div8フィールド、sub_video_cropping_start_y_div8フィールド及び/又はsub_video_afd_bar()フィールドを含むことができる。
sub_video_width_div8フィールド、sub_video_height_div8フィールド、及びsub_video_aspect_ratioフィールドは、分離又はクロップされるサブビデオ(sub video)別に解像度情報である幅及び高さ情報と画面比情報を示すことができる。
sub_video_view_idフィールドは、クロップされた映像を区分するためのidを示すことができる。
sub_video_priorityフィールドは、クロップされる映像の優先順位を示すことができる。
sub_video_cropping_start_x_div8フィールド、sub_video_cropping_start_y_div8フィールドは、全体のパノラマ映像からサブビデオを分離するための座標値の開始点(x,y)を示すことができる。実際の座標は、このフィールドが示す値に8を掛けた値であり得る。ここで、extraction_info_metadata()は、座標値の終点(x,y)を示すフィールドを含むことができる。
sub_video_afd_bar()フィールドは、上述したpanorama_composition_metadata()に含まれたsub_video_afd_bar()フィールドと同一であり、これに対しては既に詳細に説明した。
図24は、本発明の一実施例に係るシナリオ2をベースにしたビデオストリームの構成を示した図である。
全体のパノラマ映像に対するストリームは一つで構成されるが、クロップされる各領域に対する固定ID値を付与することによって、本発明の一実施例は映像を分離することができる。この場合、本発明の一実施例は、実際のクロッピングのための座標値に対する情報無しでsub_video_stream_idのみを用いて全体のパノラマ映像を分離及び/又は分割することができる。これによって、本発明の一実施例はビット数を減少させることができる。本発明の一実施例は、sub_video_stream_idを用いることによって、実際のクロッピングのための座標値を用いてパノラマ映像を分割する方法よりもビット数を減少させることができる。
図25は、本発明の一実施例に係るROI_info_metadata()の構成を示した図である。
本発明の一実施例によれば、ROI_info_metadata()を通じてROIに対する追加情報をシグナルすることができる。全体のパノラマ映像に対する基本情報は基本的に提供されるので、本発明の一実施例は、ROIに対する追加情報を既にデコードされた基本層ストリームに追加的に伝達することができる。ここで、ROI(region of interest)は関心領域と命名することができる。追加情報は、エンハンスメントデータ及び/又は付加データ(residual data)と命名することができる。
本発明の一実施例に係るROI_info_metadata()は、ROI_video_profileフィールド、ROI_video_levelフィールド、ROI_video_tierフィールド、ROI_video_priorityフィールド、ROI_video_dynamic_rangeフィールド、ROI_video_color_gamutフィールド、ROI_video_width_div8フィールド、ROI_video_height_div8フィールド、ROI_start_x_div8フィールド、ROI_start_y_div8フィールド及び/又はROI_filtering_info_descriptor()を含むことができる。
ROI_video_profileフィールド、ROI_video_levelフィールド、及びROI_video_tierフィールドは、ROIに対するプロファイル、レベル及びティア情報を示すことができる。
ROI_video_priorityフィールドは、上述したROI_numが示す多数のROIに対する優先順位を示すことができる。本発明の一実施例は、優先順位の順序通りに高画質のサービスを提供することができ、ユーザがサービスを選択することもできる。
ROI_video_dynamic_rangeフィールド、ROI_video_color_gamutフィールドは、ROIのダイナミックレンジ及びカラーガマットを示すことができる。本発明の一実施例によれば、高画質のROIサービスは、高いフレームレート(higher frame rate)、ハイダイナミックレンジ(high dynamic range)、広いカラーガマット(wide color gamut)、クロマサブサンプリング(chroma subsampling)(4:2:2又は4:4:4)、高い解像度(higher resolution)などを通じて提供することができる。高いフレームレート、クロマサブサンプリング(4:2:2又は4:4:4)及び高い解像度は、レベル(高いフレームレート、高い解像度)とプロファイル(クロマサブサンプリング)に区分してシグナルすることができる。本発明の他の一実施例に係るROI_info_metadata()は、高いフレームレート、クロマサブサンプリング(4:2:2又は4:4:4)及び/又は高い解像度をシグナルするフィールドを含むことができる。本発明の一実施例に係るプロファイルは、ビット深度(bit depth)だけでなくクロマサブサンプリングに対しても区分することができる。
ROI_video_width_div8フィールド、ROI_video_height_div8フィールドは、ROI領域の解像度を示し、ここで、実際の解像度は、(ROI_video_width_div8フィールド値*8)*(ROI_video_height_div8フィールド値*8)を示すことができる。本発明の一実施例に係るROI_info_metadata()は、ROI領域の画面比を示すフィールドを含むことができる。
ROI_start_x_div8フィールド、ROI_start_y_div8フィールドは、ROI領域が始まる座標値(x,y)を示すことができる。このフィールドが示す座標値(x,y)は、全体のパノラマ映像に対する値であって、実際の座標は、このフィールドに8を掛けた値であり得る。本発明の他の一実施例は、ROI領域の開始点の代わりにROI領域の終点をシグナルすることができる。本発明の一実施例に係るROIサービスは、ROI_start_x_div8フィールド、ROI_start_y_div8フィールド、ROI_video_width_div8フィールド及び/又はROI_video_height_div8フィールドを通じて提供することができる。
ROI_filtering_info_descriptor()は、ROI領域の向上層信号を基本層信号とマージ(merge)するときに必要なフィルタリング過程に対する情報を含むことができる。本発明の一実施例によれば、ROI領域の向上層信号を基本層信号とマージするとき、フィルタリングをさらに含ませることができる。このとき、ROI_filtering_info_descriptor()は、上述したpanorama_filtering_metadata()に含まれた各フィールドをそのまま含むことができる。
図26は、本発明の一実施例に係るSDT(service description table)の構成を示した図である。
本発明の一実施例に係るSDT(service description table)は、table_idフィールド、section_syntax_indicatorフィールド、section_lengthフィールド、transport_stream_idフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、original_network_idフィールド、service_idフィールド、EIT_schedule_flagフィールド、EIT_present_following_flagフィールド、running_statusフィールド、free_CA_modeフィールド、descriptors_loop_lengthフィールド、descriptor()及び/又はCRC_32フィールドを含む。
table_idフィールドは、テーブルのタイプを識別する。table_idフィールドは、当該テーブルセクションがSDTを構成するセクションであることを示す役割をすることができる。
section_syntax_indicatorフィールドは、当該フィールドの後に来るテーブルセクションのフォーマットを示す。当該フィールドの値が0であれば、当該テーブルセクションはショート(short)フォーマットであることを示し、当該フィールドの値が1であれば、当該テーブルセクションは一般的なロング(long)フォーマットであることを示す。(section_syntax_indicator:The section_syntax_indicator is a 1bit field which shall be set to 「1」.)
section_lengthフィールドは、当該テーブルセクションの長さを示す。section_lengthフィールドは、当該フィールド以降から当該テーブルセクションの終わりまでの長さを示すことができる。(section_length:This is a 12bit field,the first two bits of which shall be 「00」.It specifies the number of bytes of the section,starting immediately following the section_length field and including the CRC.The section_length shall not exceed 1021 so that the entire section has a maximum length of 1024 bytes.)
transport_stream_idフィールドは、当該テーブルで説明しようとするトランスポートストリーム(TS)を識別する。(transport_stream_id:This is a 16bit field which serves as a label for identification of the TS,about which the SDT informs,from any other multiplex within the delivery system.)
version_numberフィールドは、プライベートテーブルセクション(private table section)のバージョン番号を示す。受信機は、当該フィールドと後述するcurrent_next_indicatorフィールドを用いてメモリに格納されているテーブルセクションのうち最近のものを探すことができる。(version_number:This 5bit field is the version number of the sub_table.The version_number shall be incremented by 1 when a change in the information carried within the sub_table occurs.When it reaches value 「31」,it wraps around to 「0」.When the current_next_indicator is set to 「1」,then the version_number shall be that of the currently applicable sub_table.When the current_next_indicator is set to 「0」,then the version_number shall be that of the next applicable sub_table.)
current_next_indicatorフィールドが示す値が1であれば、現在伝送されるテーブルが有効であることを示し、0であれば、現在伝送されるテーブルが現在は有効でないが、後で有効になることを示す。(current_next_indicator:This 1bit indicator,when set to 「1」 indicates that the sub_table is the currently applicable sub_table.When the bit is set to 「0」,it indicates that the sub_table sent is not yet applicable and shall be the next sub_table to be valid.)
section_numberフィールドは、当該セクションが当該テーブルの何番目のセクションであるのかを示す。(section_number:This 8bit field gives the number of the section.The section_number of the first section in the sub_table shall be 「0x00」.The section_number shall be incremented by 1 with each additional section with the same table_id,transport_stream_id,and original_network_id.)
last_section_numberフィールドは、当該テーブルを構成しているセクションのうち最後のセクションの順番を示す。(last_section_number:This 8bit field specifies the number of the last section(that is,the section with the highest section_number) of the sub_table of which this section is part.)
original_network_idフィールドは、当該テーブルで記述するサービスを伝送した最初の放送局を識別することができる。(original_network_id:This 16bit field gives the label identifying the network_id of the originating delivery system.)
service_idフィールドは、トランスポートストリーム内に存在する各サービスを識別する。service_idフィールドは、PMTでprogram_numberフィールドとその機能が同一であり得る。(service_id:This is a 16bit field which serves as a label to identify this service from any other service within the TS.The service_id is the same as the program_number in the corresponding program_map_section.)
EIT_schedule_flagフィールドが示す値が1であれば、現在TS内にサービスのためのEITスケジュール情報(EIT schedule flag)が存在することを示し、0であればこれが存在しないことを示す。(EIT_schedule_flag:This is a 1bit field which when set to 「1」 indicates that EIT schedule information for the service is present in the current TS,see TR 101 211[i.2] for information on maximum time interval between occurrences of an EIT schedule sub_table).If the flag is set to 0 then the EIT schedule information for the service should not be present in the TS.)
EIT_present_following_flagフィールドが示す値が1であれば、現在TS内にサービスのためのEIT_present_following情報が存在することを示し、0であればこれが存在しないことを示す。(EIT_present_following_flag:This is a 1bit field which when set to 「1」 indicates that EIT_present_following information for the service is present in the current TS,see TR 101 211[i.2]for information on maximum time interval between occurrences of an EIT present/following sub_table.If the flag is set to 0 then the EIT present/following information for the service should not be present in the TS.)
running_statusフィールドは、サービスの状態を示す。例えば、running_statusフィールドの値が1であれば、サービスが「not running」であることを示し、2であれば「starts in a few seconds」であることを示し、3であれば「pausing」であることを示し、4であれば「running」であることを示し、5であれば「service offair」であることを示すことができる。(running_status:This is a 3bit field indicating the status of the service as defined in table 6.For an NVOD reference service the value of the running_status shall be set to 「0」.)
free_CA_modeフィールドが示す値が0であれば、サービスを構成するコンポーネントストリームがスクランブルされていないことを示し、1であれば、一つ以上のストリームに対する接近がCAシステムによって調節されることを示す。CAシステムは、Conditional Access Systemの略語であって、放送の視聴を契約者に限定するために放送コンテンツの暗号化機能と契約者のみが暗号を解いて放送コンテンツを視聴できる機能を提供するシステムを意味する。(free_CA_mode:This 1bit field,when set to 「0」 indicates that all the component streams of the service are not scrambled.When set to 「1」 it indicates that access to one or more streams may be controlled by a CA system.)
descriptors_loop_lengthフィールドは、当該フィールドの後に来る各ディスクリプタの長さを足した値を示す。(descriptors_loop_length:This 12bit field gives the total length in bytes of the following descriptors.)
descriptor()は、各サービスに対して記述するディスクリプタを意味する。本発明の一実施例によれば、パノラマ映像サービス及び/又はプログラムに対するガイド情報を提供するために、上述したpanorama_composition_infoはこのディスクリプタに含ませることができる。
CRC_32フィールドは、当該テーブルセクションに含まれたデータに誤りがあるか否かを確認するために使用されるCRC値を示す。(CRC_32:This is a 32bit field that contains the CRC value that gives a zero output of the registers in the decoder.)
図27は、本発明の一実施例に係るEIT(Event Information Table)の構成を示した図面だ。
本発明の一実施例に係るEIT(Event Information Table)は、table_idフィールド、section_syntax_indicatorフィールド、section_lengthフィールド、service_idフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、transport_stream_idフィールド、original_network_idフィールド、segment_last_section_numberフィールド、last_table_idフィールド、event_idフィールド、start_timeフィールド、durationフィールド、running_statusフィールド、free_CA_modeフィールド、descriptors_loop_lengthフィールド、descriptor()及び/又はCRC_32フィールドを含む。
table_idフィールドは、テーブルのタイプを識別する。table_idフィールドは、当該テーブルセクションがEITを構成するセクションであることを示す役割をすることができる。
section_syntax_indicatorフィールドは、当該フィールドの後に来るテーブルセクションのフォーマットを示す。当該フィールドの値が0であれば、当該テーブルセクションはショートフォーマットであることを示し、当該フィールドの値が1であれば、当該テーブルセクションは一般的なロングフォーマットであることを示す。
section_lengthフィールドは、当該テーブルセクションの長さを示す。section_lengthフィールドは、当該フィールド以降から当該テーブルセクションの終わりまでの長さを示すことができる。
service_idフィールドは、トランスポートストリーム内に存在する各サービスを識別する。service_idフィールドは、PMTでprogram_numberフィールドとその機能が同一であり得る。
version_numberフィールドは、プライベートテーブルセクションのバージョン番号を示す。受信機は、当該フィールドと後述するcurrent_next_indicatorフィールドを用いてメモリに格納されているテーブルセクションのうち最近のものを探すことができる。
current_next_indicatorフィールドが示す値が1であれば、現在伝送されるテーブルが有効であることを示し、0であれば、現在伝送されるテーブルが現在は有効でないが、後で有効になることを示す。
section_numberフィールドは、当該セクションが当該テーブルの何番目のセクションであるのかを示す。
last_section_numberフィールドは、当該テーブルを構成しているセクションのうち最後のセクションの順番を示す。
transport_stream_idフィールドは、当該テーブルで説明しようとするトランスポートストリーム(TS)を識別する。
original_network_idフィールドは、当該テーブルで記述するサービス又はイベントを伝送した最初の放送局を識別することができる。
segment_last_section_numberフィールドは、サブタイトル(sub table)が存在する場合、該当セグメントの最後のセクション番号を示す。サブタイトルが分節されていない場合、当該フィールドが示す値はlast_section_numberフィールドが示す値と同一の値を示すことができる。
last_table_idフィールドは、使用された最後のtable_idを示す。
event_idフィールドは、それぞれのイベントを識別し、一つのサービス内で唯一の値を有する。
start_timeフィールドは、該当イベントの開始時間を示す。
durationフィールドは、該当イベントの持続時間を示す。例えば、1時間45分30秒間持続するプログラムであれば、durationフィールドは0x014530値を示すことができる。
running_statusフィールドは、該当イベントの状態を示す。
free_CA_modeフィールドが示す値が0であれば、サービスを構成するコンポーネントストリームがスクランブルされていないことを示し、1であれば、一つ以上のストリームに対する接近がCAシステムによって調節されることを示す。CAシステムは、Conditional Access Systemの略語であって、放送の視聴を契約者に限定するために放送コンテンツの暗号化機能と契約者のみが暗号を解いて放送コンテンツを視聴できる機能を提供するシステムを意味する。
descriptors_loop_lengthフィールドは、当該フィールドの後に来る各ディスクリプタの長さを足した値を示す。
descriptor()は、各イベントに対して記述するディスクリプタを意味する。本発明の一実施例によれば、パノラマ映像サービス及び/又はプログラムに対するガイド情報を提供するために、上述したpanorama_composition_infoはこのディスクリプタに含ませることができる。
CRC_32フィールドは、当該テーブルセクションに含まれたデータに誤りがあるか否かを確認するために使用されるCRC値を示す。
本発明の一実施例に係るEITは、TS内にテーブル(table)の形態で伝送することができ、xml形態でIPストリーミングによって伝送することができる。
図28は、本発明の一実施例に係るEITに含まれたlinkage_descriptor()の構成を示した図である。
本発明の一実施例によれば、linkage_descriptor()は、EITのイベントレベルディスクリプタに含ませることができる。
本発明の一実施例に係るlinkage_descriptor()は、descriptor_tagフィールド、descriptor_lengthフィールド、transport_stream_idフィールド、original_network_idフィールド、service_idフィールド、linkage_typeフィールド及び/又はadvanced_event_linkage_info()を含むことができる。
descriptor_tagフィールドは、このディスクリプタがlinkage_descriptorであることを示すことができる。
descriptor_lengthフィールドは、このディスクリプタの長さを示すことができる。
transport_stream_idフィールドは、情報サービス(information service)を含むTSを識別する識別子を示すことができる。(This is a 16bit field which identifies the TS containing the information service indicated.)
original_network_idフィールドは、情報サービスの本来の伝送システムのネットワーク識別子を示すことができる。(This 16bit field gives the label identifying the network_id of the originating delivery system of the information service indicated.)
service_idフィールドは、TS内の情報サービスを識別することができる。(This is a 16bit field which uniquely identifies an information service within a TS.The service_id is the same as the program_number in the corresponding program_map_section.If the linkage_type field has the value 0x04,then the service_id field is not relevant,and shall be set to 0x0000.)
linkage_typeフィールドは、情報サービスなどを連結するリンケージ(linkage)タイプを示すことができる。(This is an 8bit field specifying the type of linkage.)
advanced_event_linkage_info()に対しては後で詳細に説明する。
本発明の一実施例によれば、現在ユーザが視聴する放送サービスに対応するパノラマイベント及び/又はサービスを知らせるとき、linkage_type値として0x0Fを使用することができる。その一方で、現在ユーザが視聴するパノラマイベント及び/又はサービスに対応するHD及び/又は3Dサービスを知らせるとき、linkage_type値として0x0Eを使用することができる。また、現在ユーザが視聴するパノラマイベント及び/又はサービスに対応するUHDサービスを知らせるとき、linkage_type値として0x0Fを使用することができる。
図29は、本発明の一実施例に係るlinkage_typeが0x0Eである場合、link_typeによるターゲットサービス(target service)のタイプを示した図である。
本発明の一実施例によれば、link_typeが0であれば、ターゲットサービスがSDサービスであることを示すことができ、1であればHDサービスであることを示すことができ、2であればフレーム互換プラノステレオスコーピック(frame compatible planostereoscopic)サービスであることを示すことができ、3であればサービス互換プラノステレオスコーピック(service compatible planostereoscopic)サービスであることを示すことができる。
この図面を見ると、linkage_typeが0x0Eである場合、2ビットが割り当てられたlink_typeには残ったビットがないので、本発明の一実施例は、ターゲットイベント及び/又はサービスがパノラマサービス及び/又はイベントであることをシグナルするために新しいlinkage_type値として0x0Fを割り当て、link_type及び/又はlinkage_type値の組み合わせでターゲットサービスがパノラマイベント及び/又はサービスであることをシグナルすることができる。このとき、ターゲットサービスがSDやHDである場合は、extended_event_linkage_info()もそのまま活用することができる。
本発明の一実施例によれば、linkage_typeが0x0Fであるとき、advanced_event_linkage_info()は、ターゲットイベント及び/又はサービスがパノラマイベント及び/又はサービスであることを示すlink_typeフィールドを含むことができる。これに対しては後で詳細に説明する。
図30は、本発明の一実施例に係るadvanced_event_linkage_info()の構成を示した図である。
本発明の一実施例によれば、linkage_typeフィールドが0x0Fである場合、パノラマイベント及び/又はサービスをシグナルするadvanced_event_linkage_info()をlinkage_descriptorに含ませることができる。
本発明の一実施例に係るadvanced_event_linkage_info()は、num_link_eventフィールド、link_simulcastフィールド、link_delivery_typeフィールド、detail_info_flagフィールド、link_typeフィールド、link_event_idフィールド、link_original_network_idフィールド、link_transport_stream_idフィールド、link_service_idフィールド、delivery_detail_info()及び/又はtime_shift_detail_info()を含むことができる。
num_link_eventフィールドは、リンクの数を示すことができる。
link_simulcastフィールドは、対応するイベント及び/又はサービスが現在のイベント及び/又はサービスと同時に放送されるか否かを示すことができる。例えば、この値が「1」である場合、時間差無しで同時に放送されることを示すことができる。
link_delivery_typeフィールドは、対応するイベント及び/又はサービスが放送される経路の種類を示すことができる(地上波、衛星、ケーブル、IPなど)。対応するイベント及び/又はサービスが同一の経路又は同一の方式であれば、「001」の値を指定することができる。一方、同一の経路であっても、伝送パラメータ(例えば、モジュレーション方式と関連するパラメータなど)が異なれば、経路に該当する情報を指定できるが(例えば、「010」と「100」との間の値)、後述するdelivery_detail_info()を通じて詳細パラメータ情報をシグナルすることができる。ここで、link_delivery_typeフィールドは、同一のイベントの同一の伝送経路、ケーブル、IP又は地上波などをシグナルすることができる。
detail_info_flagフィールドは、リンクされるイベント及び/又はサービスに対する物理伝送パラメータに対する情報を含むか否かを示すことができる。
link_typeフィールドは、対応するイベント又はサービスのサービスタイプを示す。例えば、各値によって次のようなUHDビデオの情報及び/又はパノラマサービスの情報を示すことができる。(「001」 4K UHD、8ビット、4:2:0、「010」 4K UHD、10ビット、4:2:0、「011」 4K UHD、10ビット、4:2:2、「0x10」 パノラマ、「0x11」 パノラマ、HDR提供、WCG提供)
link_event_idフィールド、link_original_network_idフィールド、link_transport_stream_idフィールド、link_service_idフィールドは、それぞれ対応するイベント及び/又はサービスに対するイベント識別子(event_id)、original_network_id、transport_stream_id、service_idをそれぞれ示すことができる。
delivery_detail_info()は、リンクされるイベント及び/又はサービスに対する物理伝送パラメータを示すが、例えば、これを用いて伝送されるイベントデータのモジュレーション方式、周波数情報、FEC方式などの情報をシグナルすることができる。
time_shift_detail_info()は、リンクされるイベント及び/又はサービスに対する現在のイベント及び/又はサービスに時間差が存在する場合、その時間情報に対する情報をシグナルすることができる。実施例を用いて、分単位で何日後に放送されるのかなどを知らせるフィールドを含ませることができる。この値をシグナルする他の例として、event_idとこのevent_idで識別されるイベントに対する時間情報を関連EITから参照させることもできる。
図31は、本発明の一実施例に係るPMT(program map table)の構成及びPMTに含まれるpanorama_composition_info()の位置を示した図である。
本発明の一実施例によれば、panorama_composition_info()は、PMT内でプログラムレベル及び/又はビデオ(ストリーム)レベルで分離し、それぞれのレベルでシグナルすることができる。
本発明の一実施例に係るPMT(program map table)は、table_idフィールド、section_syntax_indicatorフィールド、section_lengthフィールド、program_numberフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、PCR_PIDフィールド、program_info_lengthフィールド、descriptor()、stream_typeフィールド、elementary_PIDフィールド、ES_info_lengthフィールド、descriptor()及び/又はCRC_32フィールドを含む。
table_idフィールドは、テーブルのタイプを識別する。table_idフィールドは、当該テーブルセクションがPMTを構成するセクションであることを示す役割をすることができる。
section_syntax_indicatorフィールドは、当該フィールドの後に来るテーブルセクションのフォーマットを示す。当該フィールドの値が0であれば、当該テーブルセクションはショートフォーマットであることを示し、当該フィールドの値が1であれば、当該テーブルセクションは一般的なロングフォーマットであることを示す。
section_lengthフィールドは、当該テーブルセクションの長さを示す。section_lengthフィールドは、当該フィールド以降から当該テーブルセクションの終わりまでの長さを示すので、当該テーブルセクションの実際の長さは、seccion_lengthフィールドが示す値に3バイトを足した値になり得る。
program_numberフィールドは、トランスポートストリーム内に存在する各プログラムサービス又は仮想チャネル(virtual channel)を識別する。
version_numberフィールドは、プライベートテーブルセクションのバージョン番号を示す。受信機は、当該フィールドと後述するcurrent_next_indicatorフィールドを用いてメモリに格納されているテーブルセクションのうち最近のものを探すことができる。
current_next_indicatorフィールドが示す値が1であれば、現在伝送されるテーブルが有効であることを示し、0であれば、現在伝送されるテーブルが現在は有効でないが、後で有効になることを示す。
section_numberフィールドは、当該セクションが当該テーブルの何番目のセクションであるのかを示す。
last_section_numberフィールドは、当該テーブルを構成しているセクションのうち最後のセクションの順番を示す。
PCR_PIDフィールドは、プログラムサービスのためのPCR(Program Clock Reference)が存在するパケットID(packet ID)を示す。
program_info_lengthフィールドは、後に来るプログラム情報(program_info)を示すディスクリプタの長さを示す。
descriptor()は、当該テーブルセクションに該当するプログラムに対する情報を示すディスクリプタを意味する。本発明の一実施例によれば、panorama_composition_infoに含まれたフィールドのうちpanorama_service_typeフィールド、panorama_composition_info_verフィールド、panorama_width_div32フィールド、panorama_height_div32フィールド、panorama_profileフィールド、panorama_levelフィールド及び/又はpanorama_tierフィールドは、PMTのプログラムレベルでシグナルされるディスクリプタに含ませることができる。
stream_typeフィールドは、当該テーブルが説明しているプログラムを構成する各単位ストリームの種類を示す。
elementary_PIDフィールドは、当該テーブルが説明しているプログラムを構成する各単位ストリームのパケットID(packet ID)を示す。本発明の一実施例によれば、全体のパノラマ映像が多数の映像に分割され、分割された各映像を含む多数のストリームが存在する場合、このフィールドは、各ストリームごとに異なるelementary_PID値を有するように割り当てることができる。
ES_info_lengthフィールドは、後に来る各単位ストリームに対する情報(ES_info)を示すディスクリプタの長さを示す。
descriptor()は、当該テーブルが説明しているプログラムを構成する単位ストリームのうち一つの単位ストリームに対する情報を示すディスクリプタを意味する。本発明の一実施例によれば、panorama_composition_infoに含まれたフィールドのうちpanorama_stream_numフィールド、panorama_view_numフィールド、panorama_view_priorityフィールド、included_stream_idフィールド、panorama_composition_metadata()フィールド、panorama_filtering_metadata()フィールド、cropping_region_numフィールド、extraction_info_metadata()フィールド、ROI_numフィールド、ROI_codec_typeフィールド及び/又はROI_info_metadata()フィールドは、PMTのビデオ(ストリーム)レベルでシグナルされるディスクリプタに含ませることができる。
CRC_32フィールドは、当該テーブルセクションに含まれたデータに誤りがあるか否かを確認するために使用されるCRC値を示す。
本発明の一実施例に係るPMTは、MPEGTSを通じてインバンド(In band)で伝送することができ、PMTを含むPSI情報全体をxml形態でIPを介して伝送することができる。
図32は、本発明の一実施例に係るTVCT(terrestrial virtual channel table)の構成を示した図である。
本発明の一実施例に係るpanorama_composition_infoは、TVCTのチャネルレベルディスクリプタ(channel level descriptor)に含ませることができる。
本発明の一実施例に係るTVCT(Terrestrial Virtual Channel Table)は、table_idフィールド、section_syntax_indicatorフィールド、private_indicatorフィールド、section_lengthフィールド、transport_stream_idフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、protocop_versionフィールド、num_channels_in_sectionフィールド、short_nameフィールド、major_channel_numberフィールド、minor_channel_numberフィールド、modulation modeフィールド、carrier_frequencyフィールド、channel_TSIDフィールド、program_numberフィールド、ETM_locationフィールド、access_controlledフィールド、hiddenフィールド、hide_guideフィールド、service_typeフィールド、source_idフィールド、descriptors_lengthフィールド及び/又はdescriptor()を含むことができる。
table_idフィールドは、テーブルを識別する。
section_syntax_indicatorフィールドは、MPEG2 private_sectionテーブルのロング形態を示すために1にセットされる1ビットフィールドである。(This 1bit field shall be set to 「1」 to always indicate the 「long」 form of the MPEG2 private_section table.)
private_indicatorフィールドは、1にセットされる1ビットフィールドである。(This 1bit field shall be set to 「1」.)
section_lengthフィールドは、このフィールドの後に来るテーブルセクションの長さをバイト数で示す。(This is a 12bit field,the first two bits of which shall be 「00」.It specifies the number of bytes of the section,starting immediately following the section_length field and including the CRC.The section_length shall not exceed 1021 so that the entire section has a maximum length of 1024 bytes.)
transport_stream_idフィールドは、テーブル内にあるMPEG2伝送ストリーム(Transport Strema:TS)の識別子を示す。(To distinguish each transport stream within a single network(terrestrial、cable or satellite) from another,MPEG2 established the use of a 16bit(ranging from 0 to 65535) transport_stream_identifier,which is also called a TSID.)
version_numberフィールドは、テーブルのバージョン番号を示す5ビットフィールドである。(This 5bit field is the version number of the PSIP_section.The version_number shall be incremented by 1 modulo 32 when a change in the information carried within the PSIP_section occurs.When the current_next_indicator is set to 「0」,then the version_number shall be that of the next applicable PSIP_section with the same table_id,table_id_extension,and section_number.)
current_next_indicatorフィールドは、1ビットフィールドであって、このテーブルが現在適用可能であるのか、それとも次に適用可能であるのかを示す。(A 1bit field,which when set to 「1」 indicates that the PSIP_section sent is currently applicable.When the current_next_indicator is set to 「1」,then the version_number shall be that of the currently applicable PSIP_section.When the bit is set to 「0」,it indicates that the PSIP_section sent is not yet applicable and shall be the next PSIP_section with the same section_number,table_id_extension,and table_id to become valid.)
section_numberフィールドは、セクションの番号を示す。(This 8bit field gives the number of the PSIP_section.The section_number of the first section in a PSIP table shall be 0x00.The section_number shall be incremented by 1 with each additional section in PSIP table.The scope of the section_number shall be defined by the table_id and table_id_extension.That is,for each PSIP table and value of the table_id_extension field,there is the potential for the full range of section_number values.)
last_section_numberフィールドは、最後のセクションの番号を識別する。(This 8bit field specifies the number of the last section(that is,the section with the highest section_number) of the PSIP table of which this section is a part.Its scope is the same as for the section_number field.)
protocop_versionフィールドは、現在のプロトコルで定義されたパラメータと異なるパラメータを伝送する現在のテーブルタイプを後で許容するための機能を有するフィールドである。(An 8bit unsigned integer field whose function is to allow,in the future,this table type to carry parameters that may be structured differently than those defined in the current protocol.At present,the only valid value for protocol_version is zero.Nonzero values of protocol_version may be used by a future version of this standard to indicate structurally different tables.)
num_channels_in_sectionフィールドは、仮想チャネル解像度の個数を示す。(The num_channels_in_section field in ATSC Cable Virtual Channel table CVCT table sections is an eightbit field that indicates the number of virtual channel definitions to follow in the table section.)
short_nameフィールドは、仮想チャネルのためのショートネーム(short name)を示す112ビットフィールドである。(The short_name field is a 112bit field in ATSC CVCT table sections that gives the short_name for the virtual channel.Each letter of the short_name is formatted as a 16bit Unicode character,with the high order byte transmitted first.So,short_name for TVCT and CVCT entries is seven Unicode characters,which short_name for SVCT entries is eight Unicode characters.If the display name is less than the number of permitted characters,0/0x00 is appended to the end until the alloted number of bits has been reached.)
major_channel_numberフィールドは、仮想チャネルと関連するメジャーチャネルの数を示す。(A 10bit number that represents the 「major」 channel number associated with the virtual channel being defined in this iteration of the 「for」 loop.Each virtual channel shall be associated with a major and a minor channel number.The major channel number,along with the minor channel number,act as the user’s reference number for the virtual channel.The major_channel_number shall be between 1 and 99.The value of major_channel_number shall be set such that in no case is a major_channel_number/minor_channel_number pair duplicated within the TVCT.)
minor_channel_numberフィールドは、仮想チャネルと関連するマイナーチャネルの数を示す。(A 10bit number in the range 0 to 999 that represents the 「minor」 or 「sub」 channel number.This field,together with major_channel_number,performs as a twopart channel number,where minor_channel_number represents the second or righthand part of the number.When the service_type is analog television,minor_channel_number shall be set to 0.)
modulation modeフィールドは、仮想チャネルの伝送キャリアに対する変調方式を示す。(The modulation_mode is an eightbit field in a virtual channel entry tells receivers the modulation used to transmit individual channels.)
carrier_frequencyフィールドは、伝送仮想チャネルによって使用されるキャリア周波数情報を伝送する。(The carrier frequency is a 32bit field that transmits the carrier frequency used by the transport carrying the virtual channel.)
channel_TSIDフィールドは、仮想チャネルと関連するMPEG2プログラムを伝送する伝送ストリーム(Transport Stream:TS)に対するMPEG2伝送ストリームIDを示す。(The channel_TSID is a 16bit unsigned integer field that gives the transport_stream_id of the channel that carries(or for inactive channels,will carry) the virtual channel.)
program_numberフィールドは、TS内の各プログラムサービス又は仮想チャネルを識別する。(The program_number is a 16bit unsigned integer that uniquely identifies each program service(or virtual channel) present in a transport stream.)
ETM_locationフィールドは、チャネル、イベント又はデータイベントのための拡張されたテキストメッセージの存在有無を示す。(The ETM_location field denotes whether there is an extended text message for the channel(Channel Extended Text table or CETT),event(Event Extended Text table) or data event(Data Extended Text table).)
access_controlledフィールドは、該当の仮想チャネルと連関したイベントを制御できるか否かを示す。(When access_controlled is set to 「1」,means that events associated with this virtual channel may be access controlled.When set to 「0」,access to event is not controlled.)
hiddenフィールドは、該当チャネルが仮想チャネル数字のダイレクトエントリ(direct entry)(又はフィールド、属性、個体)によって接近できるか否かを意味する。(When hidden is set to 「1」,means the channel cannot be accessed by direct entry of the virtual channel number.When set to 「0」,virtual can be accessed by direct entry.)
hide_guideフィールドは、該当チャネルが仮想チャネル数字のダイレクトエントリ(又はフィールド、属性、個体)によって接近できるか否かを意味する。(When hide_guide is set to 「1」,means the channel cannot be accessed by direct entry of the virtual channel number.When set to 「0」,virtual can be accessed by direct entry.)
service_typeフィールドは、仮想チャネルでセットされたサービスタイプを識別する。(The service_type is a 6bit enumerated field that identifies the type of service set in the virtual channel.)本発明の一実施例に係るパノラマサービスのservice_typeは、パラメータ化サービス(parameterized service)(0x07)、拡張されたパラメータ化サービス(extended parameterized service)(0x09)及び/又は新しいDTVサービスパノラマサービス(service panorama service)(0x10)と指定することができる。上述したサービスの名称及び値は一実施例であり、他の名称又は値に設定することもできる。
source_idフィールドは、16ビットの符号が定められていない整数であって、仮想チャネルと連関したプログラミングソースを示す。(A 16bit unsigned integer number that identifies the programming source associated with the virtual channel.In this context,a source is one specific source of video,text,data,or audio programming.Source ID value zero is reserved.Source ID values in the range 0x0001 to 0x0FFF shall be unique within the Transport Stream that carries the VCT,while values 0x1000 to 0xFFFF shall be unique at the regional level.Values for source_ids 0x1000 and above shall be issued and administered by a Registration Authority designated by the ATSC.)
descriptors_lengthフィールドは、次のディスクリプタフィールドのバイトの長さを伝送する。(The descriptors_length is a 10bit unsigned integer field that signals the length in bytes of the descriptor field to follow.If there are no descriptors present,zero would be appropriate.)
descriptor()フィールドは、テーブル内に位置するディスクリプタループ(descriptor loop)である。ディスクリプタループは、追加的なディスクリプタを含むことができる。本発明の一実施例に係るpanorama_composition_infoは、このdescriptor()に含ませることができる。
図33は、本発明の一実施例に係るCVCT(cable virtual channel table)の構成を示した図である。
本発明の一実施例に係るpanorama_composition_infoは、CVCTのチャネルレベルディスクリプタに含ませることができる。
本発明の一実施例に係るCVCT(Terrestrial Virtual Channel Table)は、table_idフィールド、section_syntax_indicatorフィールド、private_indicatorフィールド、section_lengthフィールド、transport_stream_idフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、protocop_versionフィールド、num_channels_in_sectionフィールド、short_nameフィールド、major_channel_numberフィールド、minor_channel_numberフィールド、modulation modeフィールド、carrier_frequencyフィールド、channel_TSIDフィールド、program_numberフィールド、ETM_locationフィールド、access_controlledフィールド、hiddenフィールド、path_selectフィールド、out_of_bandフィールド、hide_guideフィールド、service_typeフィールド、source_idフィールド、descriptors_lengthフィールド及び/又はdescriptor()を含むことができる。
table_idフィールドは、テーブルを識別する。
section_syntax_indicatorフィールドは、MPEG2 private_sectionテーブルのロング形態を示すために1にセットされる1ビットフィールドである。(This 1bit field shall be set to 「1」 to always indicate the 「long」 form of the MPEG2 private_section table.)
private_indicatorフィールドは、1にセットされる1ビットフィールドである。(This 1bit field shall be set to 「1」.)
section_lengthフィールドは、このフィールドの後に来るテーブルセクションの長さをバイト数で示す。(This is a 12bit field,the first two bits of which shall be 「00」.It specifies the number of bytes of the section,starting immediately following the section_length field and including the CRC.The section_length shall not exceed 1021 so that the entire section has a maximum length of 1024 bytes.)
transport_stream_idフィールドは、テーブル内にあるMPEG2伝送ストリーム(Transport Strem:TS)の識別子を示す。(To distinguish each transport stream within a single network(terrestrial,cable or satellite) from another,MPEG2 established the use of a 16bit(ranging from 0 to 65535) transport_stream_identifier,which is also called a TSID.)
version_numberフィールドは、テーブルのバージョン番号を示す5ビットフィールドである。(This 5bit field is the version number of the PSIP_section.The version_number shall be incremented by 1 modulo 32 when a change in the information carried within the PSIP_section occurs.When the current_next_indicator is set to 「0」,then the version_number shall be that of the next applicable PSIP_section with the same table_id,table_id_extension,and section_number.)
current_next_indicatorフィールドは、1ビットフィールドであって、このテーブルが現在適用可能であるのか、それとも次に適用可能であるのかを示す。(A 1bit field,which when set to 「1」 indicates that the PSIP_section sent is currently applicable.When the current_next_indicator is set to 「1」,then the version_number shall be that of the currently applicable PSIP_section.When the bit is set to 「0」,it indicates that the PSIP_section sent is not yet applicable and shall be the next PSIP_section with the same section_number,table_id_extension,and table_id to become valid.)
section_numberフィールドは、セクションの番号を示す。(This 8bit field gives the number of the PSIP_section.The section_number of the first section in a PSIP table shall be 0x00.The section_number shall be incremented by 1 with each additional section in PSIP table.The scope of the section_number shall be defined by the table_id and table_id_extension.That is,for each PSIP table and value of the table_id_extension field,there is the potential for the full range of section_number values.)
last_section_numberフィールドは、最後のセクションの番号を識別する。(This 8bit field specifies the number of the last section(that is,the section with the highest section_number) of the PSIP table of which this section is a part.Its scope is the same as for the section_number field.)
protocop_versionフィールドは、現在のプロトコルで定義されたパラメータと異なるパラメータを伝送する現在のテーブルタイプを後で許容するための機能を有するフィールドである。(An 8bit unsigned integer field whose function is to allow,in the future,this table type to carry parameters that may be structured differently than those defined in the current protocol.At present,the only valid value for protocol_version is zero.Nonzero values of protocol_version may be used by a future version of this standard to indicate structurally different tables.)
num_channels_in_sectionフィールドは、仮想チャネル解像度の個数を示す。(The num_channels_in_section field in ATSC Cable Virtual Channel table CVCT table sections is an eightbit field that indicates the number of virtual channel definitions to follow in the table section.)
short_nameフィールドは、仮想チャネルのためのショートネームを示す112ビットフィールドである。(The short_name field is a 112bit field in ATSC CVCT table sections that gives the short_name for the virtual channel.Each letter of the short_name is formatted as a 16bit Unicode character,with the high order byte transmitted first.So,short_name for TVCT and CVCT entries is seven Unicode characters,which short_name for SVCT entries is eight Unicode characters.If the display name is less than the number of permitted characters,0/0x00 is appended to the end until the alloted number of bits has been reached.)
major_channel_numberフィールドは、仮想チャネルと関連するメジャーチャネルの数を示す。(A 10bit number that represents the 「major」 channel number associated with the virtual channel being defined in this iteration of the 「for」 loop.Each virtual channel shall be associated with a major and a minor channel number.The major channel number,along with the minor channel number,act as the user’s reference number for the virtual channel.The major_channel_number shall be between 1 and 99.The value of major_channel_number shall be set such that in no case is a major_channel_number/minor_channel_number pair duplicated within the TVCT.)
minor_channel_numberフィールドは、仮想チャネルと関連するマイナーチャネルの数を示す。(A 10bit number in the range 0 to 999 that represents the 「minor」 or 「sub」 channel number.This field,together with major_channel_number,performs as a twopart channel number,where minor_channel_number represents the second or righthand part of the number.When the service_type is analog television,minor_channel_number shall be set to 0.)
modulation modeフィールドは、仮想チャネルの伝送キャリアに対する変調方式を示す。(The modulation_mode is an eightbit field in a virtual channel entry tells receivers the modulation used to transmit individual channels.)
carrier_frequencyフィールドは、伝送仮想チャネルによって使用されるキャリア周波数情報を伝送する。(The carrier frequency is a 32bit field that transmits the carrier frequency used by the transport carrying the virtual channel.)
channel_TSIDフィールドは、仮想チャネルと関連するMPEG2プログラムを伝送する伝送ストリーム(Transport Stream:TS)に対するMPEG2伝送ストリームIDを示す。(The channel_TSID is a 16bit unsigned integer field that gives the transport_stream_id of the channel that carries(or for inactive channels,will carry) the virtual channel.)
program_numberフィールドは、TS内の各プログラムサービス又は仮想チャネルを識別する。(The program_number is a 16bit unsigned integer that uniquely identifies each program service(or virtual channel) present in a transport stream.)
ETM_locationフィールドは、チャネル、イベント又はデータイベントのための拡張されたテキストメッセージの存在有無を示す。(The ETM_location field denotes whether there is an extended text message for the channel(Channel Extended Text table or CETT),event(Event Extended Text table) or data event(Data Extended Text table).)
access_controlledフィールドは、該当の仮想チャネルと連関したイベントを制御できるか否かを示す。(When access_controlled is set to 「1」,means that events associated with this virtual channel may be access controlled.When set to 「0」,access to event is not controlled.)
hiddenフィールドは、該当チャネルが仮想チャネル数字のダイレクトエントリ(又はフィールド、属性、個体)によって接近できるか否かを意味する。(When hidden is set to 「1」,means the channel cannot be accessed by direct entry of the virtual channel number.When set to 「0」,virtual can be accessed by direct entry.)
path_selectフィールドは、仮想チャネルを活性化チャネルの伝送パスと連関させるCVCT内のフィールドである。(The path_select is a 1bit field in a Cable Virtual Channel table(CVCT) entry that associates a virtual channel with a transmission path of an active channel or when the channel will be active.)
out_of_bandフィールドは、仮想チャネルがOOB(Out Of Band)物理的伝送チャネルで伝送されるか否かを示す。(The out_of_band is a 1bit Boolean field in a Cable Virtual Channel table entry that when set to 「1」 is carried on the outofband physical transmission channel.When clear or 「0」,the virtual channel is carried within a tuned multiplex.When the channel is inactive,out_of_band reflects the channel that will be valid when the channel is again active.)
hide_guideフィールドは、該当チャネルが仮想チャネル数字のダイレクトエントリ(又はフィールド、属性、個体)によって接近できるか否かを意味する。(When hide_guide is set to 「1」,means the channel cannot be accessed by direct entry of the virtual channel number.When set to 「0」,virtual can be accessed by direct entry.)
service_typeフィールドは、仮想チャネルでセットされたサービスタイプを識別する。(The service_type is a 6bit enumerated field that identifies the type of service set in the virtual channel.)本発明の一実施例に係るパノラマサービスのservice_typeは、パラメータ化サービス(0x07)、拡張されたパラメータ化サービス(0x09)及び/又は新しいDTVサービスパノラマサービス(0x10)と指定することができる。上述したサービスの名称及び値は一実施例であり、他の名称又は値に設定することもできる。
source_idフィールドは、16ビットの符号が定められていない整数であって、仮想チャネルと連関したプログラミングソースを示す。(A 16bit unsigned integer number that identifies the programming source associated with the virtual channel.In this context,a source is one specific source of video,text,data,or audio programming.Source ID value zero is reserved.Source ID values in the range 0x0001 to 0x0FFF shall be unique within the Transport Stream that carries the VCT,while values 0x1000 to 0xFFFF shall be unique at the regional level.Values for source_ids 0x1000 and above shall be issued and administered by a Registration Authority designated by the ATSC.)
descriptors_lengthフィールドは、次のディスクリプタフィールドのバイトの長さを伝送する。(The descriptors_length is a 10bit unsigned integer field that signals the length in bytes of the descriptor field to follow.If there are no descriptors present,zero would be appropriate.)
descriptor()フィールドは、テーブル内に位置するディスクリプタループである。ディスクリプタループは追加的なディスクリプタを含むことができる。本発明の一実施例に係るpanorama_composition_infoは、このdescriptor()に含ませることができる。
図34は、本発明の一実施例に係るパノラマサービスのためのservice_typeの構成を示した図である。
本発明の一実施例に係るパノラマサービスのservice_typeは、パラメータ化サービス(0x07)、拡張されたパラメータ化サービス(0x09)及び/又は新しいDTVサービスパノラマサービス(0x10)と指定することができる。上述したサービスの名称及び値は一実施例であり、他の名称又は値に設定することもできる。
パラメータ化サービス(0x07)を通じて本発明の一実施例に係るパノラマサービスをシグナルする場合、パノラマサービスに対する情報は、コンポーネントリストディスクリプタ(component list descriptor)及び/又はpanorama_composition_info()を通じて敍述することができる。
拡張されたパラメータ化サービス(0x09)を通じて本発明の一実施例に係るパノラマサービスをシグナルする場合、パノラマサービスに対する情報は、コンポーネントリストディスクリプタ、パラメータ化サービスディスクリプタ及び/又はpanorama_composition_info()を通じて敍述することができる。
新しいDTVサービスパノラマサービス(0x10)を通じて本発明の一実施例に係るパノラマサービスをシグナルする場合、パノラマサービスに対する情報はpanorama_composition_info()を通じて敍述することができる。
図35は、本発明の一実施例に係るcomponent_list_descriptor()の構成を示した図である。
本発明の一実施例によれば、パノラマ映像に対するストリームはcomponent_list_descriptor()を用いてシグナルすることができ、本発明の一実施例に係るcomponent_list_descriptor()は、VCT(TVCT、CVCTを含む)のチャネルレベルに位置することができる。本発明の一実施例によれば、サービス内に含まれた各映像に対するエレメンタリストリーム(Elementary Stream)ごとにstream_info_details()を含ませることができ、stream_info_details()は、パノラマ映像に対するストリームに対する情報をシグナルすることができる。本発明の一実施例に係るパノラマサービスの場合、stream_typeがMPEG2、AVC、HEVCなどである場合にも、本発明の一実施例に係るstream_info_details()を用いて各映像に対する情報をシグナルすることができる。
本発明の一実施例に係るcomponent_list_descriptor()は、descriptor_tagフィールド、descriptor_lengthフィールド、alternateフィールド、component_countフィールド、stream_typeフィールド、format_identifierフィールド、length_of_detailsフィールド及び/又はstream_info_details()を含むことができる。
descriptor_tagフィールドは、このディスクリプタがcomponent_list_descriptor()であることを識別する識別子を示すことができる。
descriptor_lengthフィールドは、このディスクリプタの長さを示すことができる。
alternateフィールドは、component_list_descriptorの該当インスタンス(instance)が最優先の情報であるか否かを示すことができる。(A flag that indicates,when set to 「1」,that this instance of the component_list_descriptor()is a second,「alternate」 description of streams associated with the virtual channel.When the flag is set to 「0」,the set of stream types in the instance of the descriptor is the 「primary」 or 「preferred」 set.If only one component_list_descriptor() appears in the descriptor loop,the value of the alternate flag shall be set to 「0」.)
component_countフィールドは、該当チャネル(サービス)に含まれたコンポーネント(ストリーム)の個数を示すことができる。(This 7bit unsigned integer shall specify the number of components specified in the 「for」 loop to follow.The value shall be in the range of 1 to 36.)
stream_typeフィールドは、該当コンポーネントのストリームタイプを示すことができる。(This 8bit unsigned integer field shall indicate the stream_type associated with the component described in this iteration of the 「for」 loop.Stream types in the range 0xC4 to 0xFF identify stream types defined privately(not described by ATSC Standards).)
format_identifierフィールドは、stream_type値を提供するエンティティ(entity)を識別することができる。(This 32bit unsigned integer shall correspond to the format_identifier in the MPEG2 Registration Descriptor defined in ISO/IEC 138181[7] Section 2.6.9 and shall identify the entity providing the stream_type value.The value of format_identifier shall be 0x4741 3934(「GA94」 in ASCII) unless the applicable ATSC standard specifies a different value,in which case that value shall be used.The stream_type values defined in ISO/IEC 138181[7] and whose use is not standardized by ATSC Standards shall use value 0x00000000 for format_identifier.)
length_of_detailsフィールドは、後に来るフィールドであるstream_info_details()の長さを示すことができる。(This 8bit unsigned integer shall specify the length,in bytes,of the defined length of the stream_info_details() field to follow.The value of length_of_details shall be set to the length of the stream_info_details() field that has been defined for the associated stream_type value.The value shall be in the range of 0 to 246 inclusive.)
stream_info_details()フィールドは、該当のコンポーネントに対する詳細情報を示すことができる。(This field shall provide further information pertaining to the component identified by the value in the preceding stream_type field.The meaning and structure of the bits contained in stream_info_details() shall be as specified in the standard defining the meaning of the value in the stream_type field when used in an ATSC transport stream.If ATSC standards define a stream_info_details() structure for a given value of stream_type,the ATSC definition shall take precedence over any definition originating from any other standards developing organization.)これに対しては後で詳細に説明する。
図36は、本発明の一実施例に係るstream_typeがベースストリーム(base stream)を示す場合、stream_info_details()の構成を示した図である。
本発明の一実施例によれば、全体のパノラマ映像は、多数のES(Elementaty Stream)に分離して伝送することができる。この図面は、この場合に多数のESのうちベースストリームに対するstream_info_details()の構成を示した図である。
本発明の一実施例に係るstream_info_details()は、panorama_base_view_profileフィールド、panorama_base_view_tierフィールド及び/又はpanorama_base_view_levelフィールドを含むことができる。
panorama_base_view_profileフィールド、panorama_base_view_tierフィールド、及びpanorama_base_view_levelフィールドは、ベースストリームに該当する映像のプロファイル、ティア及びレベル情報を示すことができる。
図37は、本発明の一実施例に係るstream_typeがベースストリームでないストリームを示す場合、stream_info_details()の構成を示した図である。
本発明の一実施例によれば、全体のパノラマ映像は多数のES(Elementaty Stream)に分離して伝送することができる。この図面は、この場合に多数のESのうちベースストリームでないストリームに対するstream_info_details()の構成を示した図である。
本発明の一実施例に係るstream_info_details()は、panorama_view_profileフィールド、panorama_view_tierフィールド及び/又はpanorama_view_levelフィールドを含むことができる。
panorama_view_profileフィールド、panorama_view_tierフィールド、panorama_view_levelフィールドは、ベースストリームでないストリームに該当する映像のプロファイル、ティア及びレベル情報を示すことができる。
本発明の他の一実施例によれば、全体のパノラマ映像は一つのESに伝送することができる。この場合、上述したcomponent_list_descriptor()のcomponent_countフィールドは1を示すことができ、これによって、一つのstream_info_details()のみを使用することができる。この場合、この図面のstream_info_details()において、全体のパノラマ映像に対するESをシグナルすることができ、このとき、panorama_view_profileフィールド、panorama_view_tierフィールド及び/又はpanorama_view_levelフィールドが示す情報は、全体のパノラマのプロファイル、ティア及び/又はレベル情報と同一であり得る。
図38は、本発明の一実施例に係るシナリオ1のうち、メイン受信機で全てのストリームをデコードし、サブ受信機にデコードされたストリームを伝達する場合の受信機の動作を示した図である。
本発明の一実施例に係るシナリオ1は、全体のパノラマ映像を構成する多数のストリームを受信端に伝送することができる。
本発明の一実施例に係る受信機は、逆多重化部(demultiplexer)38010、第1デコーダ(decoder 1)38020、第2デコーダ(decoder 2)38030、シグナリング情報処理部38040、バウンダリフィルタリング部(boundary filtering)38050及び/又はクロッピング部(cropping)38060を含むことができる。
逆多重化部は、全体のパノラマ映像を構成する多数のストリーム及び/又はシグナリング情報を全て受信し、それぞれのストリーム及び/又はシグナリング情報を抽出し、各デコーダ及び/又はシグナリング情報処理器38040に抽出されたストリーム及び/又はシグナリング情報を伝達することができる。
デコーダ(第1デコーダ及び/又は第2デコーダ)は、逆多重化部から伝達された各ストリームをデコードし、分割された映像(video 1及び/又はvideo 2)を生成することができる。このとき、デコーダは、panorama_composition_information及び/又はシグナリング情報処理器で処理されたシグナリング情報を用いて各ストリームをデコードすることができる。
シグナリング情報処理部は、逆多重化部から抽出されたシグナリング情報を処理してデコーダに伝達することができる。ここで、シグナリング情報は、上述したPMT、VCT、EIT及び/又はSDTを含むことができる。
バウンダリフィルタリング部は、全体のパノラマ映像を構成する分離された各映像をpanorama_filtering_metadataを用いて全体のパノラマ映像に復元することができる。
クロッピング部は、バウンダリフィルタリング部によって復元された全体のパノラマ映像をextraction_info_metadataを用いてクロップした後、クロップされた各映像をUPnP、HDMI及び/又はIPを通じて他の受信機に伝達することができる。
本発明の一実施例によれば、全体のパノラマ映像を構成する多数のストリームを受信してデコードする受信機はメイン受信機に該当し、メイン受信機からクロップされた各映像を受け取る受信機はサブ受信機に該当し得る。
本発明の一実施例に係る受信機の具体的な動作は次の通りである。
本発明の一実施例に係るpanorama_composition_info()は、ビデオエレメントストリーム(video element stream)に含まれたSEI RBSP(raw byte sequence payload)を通じて受信することができる。このとき、上述した同一の情報をEIT、SDT、PMTを介しても提供することができる。
本発明の一実施例に係る受信機は、HEVC NALユニットをパースし、nal_unit_type値がSEIデータに該当する値で、payloadTypeが52であるpanorama_composition_info SEIメッセージを読み取ることができる。そして、受信機は、panorama_service_typeとパノラマ映像に対する全般的な情報であるpanorama_resolution、panorama_profile、panorama_level、panorama_tier情報をパースし、panorama_service_typeによって各シナリオ別追加情報をパースすることができる。
本発明の一実施例に係るシナリオ1によれば、送信端は、パノラマ映像を既存の受信機に互換される映像を含むようにpanorama_stream_numの数だけ分離してエンコードすることができる。本発明の一実施例に係る受信機は、それぞれの分離されたエレメンタリストリームに対してpanorama_composition_metadata()をパースすることができる。本発明の一実施例は、sub_video_base_viewにおいてベースビューとしてシグナルされた映像を既存の16:9DTV受信機でデコード及び出力させることができる。複数台の既存のDTV受信機を用いてパノラマ映像を分離して出力する場合、本発明の一実施例は、sub_video_stream_idをベースにして各受信機から出力する映像を選択してデコード及び出力させることができる。本発明の一実施例は、sub_video_priorityフィールドが示す優先順位を用いて映像を出力させることができる。
本発明の一実施例に係るシナリオ2によれば、受信機は、パノラマの全体映像をデコードし、extraction_info_metadata()に含まれたクロッピングのための座標値(sub_video_cropping_start_x、sub_video_cropping_start_y)を通じて映像を分離することができる。既存の16:9DTVでリサイズ無しでパノラマ映像の一部映像をクロップして出力すれば、本発明の一実施例は、sub_video_base_viewフィールドを通じてベースビューの映像を分離することができる。複数台のDTV受信機を用いてパノラマ映像を出力する場合であれば、本発明の一実施例に係る各受信機は、全体のパノラマ映像をデコードし、sub_video_stream_idによって映像をクロップし、クロップされた領域を出力することができる。
本発明の一実施例に係るシナリオ4によれば、送信端は、関心領域(ROI)の追加ストリームを向上層の信号として伝送することができる。受信機は、ROI_info_metadata()をパースし、各ROIに対する解像度である幅/高さ情報及び/又は座標情報を取得することができる。受信機は、取得された情報を用いて向上層の信号を全体のパノラマ映像及び/又は一部のパノラマ映像の基本層の信号と結合させ、映像をデコードすることができる。本発明の一実施例によれば、高画質のROI領域をセカンドデバイス(2nd device)に伝達したり、既存のDTV受信機の一部或いは全体の画面にディスプレイすることができる。
本発明の一実施例に係るシナリオ5によれば、パノラマ映像から分離された16:9イベントを視聴する場合、本発明の一実施例に係る受信機は、該当イベントに対するリンケージディスクリプタが存在すれば、これをパースすることができる。受信機は、リンケージディスクリプタ内のlinkage_typeフィールド値が0x0Fである場合、advanced_event_linkage_info()を読み取ることができる。本発明の一実施例に係る受信機は、advanced_event_linkage_info()を用いてリンクされたパノラマ放送イベントに対する具体的な情報を取得することができる。取得された情報を用いて、受信機は、ユーザに今視聴している16:9イベントに対応するパノラマ放送サービスを提供できることを知らせることができる。ユーザがパノラマ放送サービスを受信する意思がある場合、受信機は、advanced_event_linkage_info()で把握した情報を用いてパノラマ放送サービスを受信することができる。
図39は、本発明の一実施例に係るシナリオ1のうち、各受信機で分離されて割り当てられた各ストリームをデコードする場合の受信機の動作を示した図である。
本発明の一実施例に係るシナリオ1は、全体のパノラマ映像を構成する多数のストリームを受信端に伝送することができる。
本発明の一実施例に係る受信機は、逆多重化部39010、デコーダ39020及び/又はシグナリング情報処理部(section data processor)39030を含むことができる。
逆多重化部は、全体のパノラマ映像を構成する多数のストリームのうち一つのストリーム及び/又はシグナリング情報を受信することができ、受信されたストリーム及び/又はシグナリング情報を抽出してデコーダ39020及び/又はシグナリング情報処理部39030に伝達することができる。
デコーダは、逆多重化部から伝達されたストリームをデコードし、全体のパノラマ映像を構成する多数の映像のうち一つを生成することができる。このとき、デコーダは、panorama_composition_information及び/又はシグナリング情報処理器で処理されたシグナリング情報を用いて各ストリームをデコードすることができる。
シグナリング情報処理部は、逆多重化部から抽出されたシグナリング情報を処理してデコーダに伝達することができる。ここで、シグナリング情報は、上述したPMT、VCT、EIT及び/又はSDTを含むことができる。
本発明の一実施例によれば、分離されたストリームを受信した各受信機は、該当ストリームをデコードしてディスプレイすることができる。このとき、全ての受信機がメイン受信機及び/又はサブ受信機になり得る。
図40は、本発明の一実施例に係るシナリオ2をベースにした受信機の動作を示した図である。
本発明の一実施例に係るシナリオ2は、全体のパノラマ映像を一つのストリームにエンコードして受信端に伝送することができる。
本発明の一実施例に係る受信機は、逆多重化部40010、デコーダ40020及び/又はシグナリング情報処理部40030を含むことができる。
逆多重化部は、全体のパノラマ映像を構成する一つのストリーム及び/又はシグナリング情報を受信することができ、受信されたストリーム及び/又はシグナリング情報を抽出してデコーダ40020及び/又はシグナリング情報処理部40030に伝達することができる。このとき、逆多重化部は、全体のパノラマ映像をクロップするために必要なextraction_info_metadataを受信することができる。
デコーダは、逆多重化部から伝達されたストリームをデコードし、全体のパノラマ映像を生成することができる。このとき、デコーダは、シグナリング情報処理器で処理されたシグナリング情報を用いてストリームをデコードすることができる。また、デコーダは、受信したextraction_info_metadataを用いて全体のパノラマ映像をクロップすることができる。
シグナリング情報処理部は、逆多重化部から抽出されたシグナリング情報を処理してデコーダに伝達することができる。ここで、シグナリング情報は、上述したPMT、VCT、EIT及び/又はSDTを含むことができる。
本発明の一実施例によれば、クロップされた映像(cropped video 1、cropped video 2)は、メイン受信機及び/又はサブ受信機にUPnP、HDMI及び/又はIPを介して伝達することができる。
本発明の一実施例によれば、全体のパノラマ映像を構成するストリームを受信する受信機がメイン受信機に該当し、それ以外の他の受信機はサブ受信機に該当し得る。
図41は、本発明の一実施例に係るシナリオ4のうち、メイン受信機で全てのストリームをデコードし、サブ受信機にデコードされたストリームを伝達する場合の受信機の動作を示した図である。
本発明の一実施例に係るシナリオ4は、ROI領域に対する高画質のサービスを提供するためにSHVC(scalable HEVC)を用いて向上層で一部領域のエンハンスメントデータを提供することができ、これに対するシグナリング情報を提供することができる。
本発明の一実施例に係る受信機は、逆多重化部41010、第1デコーダ(decoder 1)41020、第2デコーダ(scalable video decoder 2)41030、シグナリング情報処理部(section data processor)41040及び/又はROIフィルタリング部(ROI filtering)41050を含むことができる。
多重化部は、全体のパノラマ映像を構成する全てのストリーム及び/又はシグナリング情報を受信し、それぞれのストリーム及び/又はシグナリング情報を抽出し、各デコーダ及び/又はシグナリング情報処理器38040に抽出されたストリーム及び/又はシグナリング情報を伝達することができる。
第1デコーダは、逆多重化部から伝達された基本層ストリームをデコードし、ベースビデオ映像(ベースビデオ)を生成することができる。このとき、第1デコーダは、ROI_info_metadata及び/又はシグナリング情報処理器で処理されたシグナリング情報を用いて基本層ストリームをデコードすることができる。
第2デコーダは、逆多重化部から伝達された向上層ストリームをデコードし、高画質ビデオを生成することができる。このとき、第2デコーダは、第1デコーダからベースビデオ映像信号を受信することができ、受信されたベースビデオ映像信号及び/又はシグナリング情報処理器で処理されたシグナリング情報を用いて向上層ストリームをデコードすることができる。
シグナリング情報処理部は、逆多重化部から抽出されたシグナリング情報を処理してデコーダに伝達することができる。ここで、シグナリング情報は、上述したPMT、VCT、EIT及び/又はSDTを含むことができる。
ROIフィルタリング部は、ROI領域の向上層信号を基本層信号とマージするためにROI領域をフィルタすることができる。このとき、ROIフィルタリング部は、ROI_filtering_info_descriptorを用いてフィルタすることができる。
本発明の一実施例によれば、生成された高画質ビデオ映像は、メイン受信機及び/又はサブ受信機にUPnP、HDMI及び/又はIPを介して伝達することができる。また、メイン受信機からPIP形式で高画質サービスを提供することができる。
本発明の一実施例によれば、全体のパノラマ映像を構成する基本層及び/又は向上層ストリームを受信してデコードする受信機はメイン受信機に該当し、メイン受信機から高画質ビデオ映像を受け取る受信機はサブ受信機に該当し得る。
本発明の一実施例によれば、メイン受信機で基本層信号を出力し、サブ受信機で高画質のサービスを提供することもできるが、その一方で、メイン受信機で高画質のビデオサービスを提供し、サブ受信機で基本層信号を提供することもできる。
メイン受信機で全体のパノラマ映像を構成する全てのストリームをデコードする本発明の一実施例と異なり、本発明の他の一実施例によれば、サブ受信機で基本層信号を受信してデコードし、サブ受信機のスケーラブルビデオデコーダ(scalable video decoder)を用いてROI領域の映像をデコード及び/又はディスプレイすることができる。
まず、本発明の一実施例に係る受信部は、映像に対するストリーム及び映像に関するシグナリング情報を含む放送ストリームを受信することができる(S42010)。ここで、シグナリング情報は、パノラマ映像に関するシグナリング情報を含むことができる。本発明の一実施例に係る逆多重化部は、受信した放送ストリームから映像に対するストリーム及び映像に関するシグナリング情報を抽出することができる(S42020)。本発明の一実施例に係るデコーダは、抽出されたシグナリング情報を用いて抽出された映像に対するストリームをデコードすることができる(S42030)。
本発明の他の一実施例によれば、映像に関するシグナリング情報は、現在視聴中の放送サービスに対応するパノラマ放送サービスに対する情報を示すイベント連結情報を含み、パノラマ映像に関するシグナリング情報は、パノラマ映像の構成を示すパノラマ構成情報を含むことができる。これに対しては、図17及び図30の説明部分で詳細に説明した。
本発明の他の一実施例によれば、映像は、一つ以上の映像に分割され、映像に対するストリームは、一つ以上の分割された映像に対するストリームを含むことができ、デコーダは、抽出されたシグナリング情報を用いて分割された映像に対するストリームのそれぞれをデコードすることができる。これに対しては、図2、図6、図7、図38及び図39の説明部分で詳細に説明する。
本発明の他の一実施例によれば、放送ストリームは、映像のうちユーザの関心領域(Region of Interest、ROI)に対する高画質映像を提供するためのROI(Region of Interest)追加情報に対するストリームを含むことができ、逆多重化部は、受信した放送ストリームから映像に対するストリーム、ROI追加情報に対するストリーム及び映像に関するシグナリング情報を抽出することができ、デコーダは、抽出されたシグナリング情報を用いて抽出された映像に対するストリーム及び/又は抽出されたROI追加情報に対するストリームをデコードすることができる。これに対しては、図5、図16及び図41の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、分割された映像に対する情報を含むことができる。これに対しては、図17、図19及び図20の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、分割された映像の区画化現象を除去するためのフィルタリング情報を含むことができる。これに対しては、図17及び図22の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、パノラマ映像を一つ以上の映像にクロップするための情報を含むことができる。これに対しては、図3、図8、図17、図23、図38及び図40の説明部分で詳細に説明する。
本発明の他の一実施例によれば、パノラマ構成情報は、関心領域の映像に対する情報を含むことができる。これに対しては、図17、図25及び図41の説明部分で詳細に説明する。
本発明の他の一実施例によれば、放送信号受信方法は、デコードされた映像に対するストリームをディスプレイするステップを含むことができ、ディスプレイするステップは、ユーザからスクローリング要求を受信する場合、スクローリング要求によって移動した領域をディスプレイすることができる。これに対しては、図4、図9、図10〜図15の説明部分で詳細に説明する。
図43は、本発明の一実施例に係る放送信号送信装置の構成を示した図である。
本発明の一実施例に係る放送信号送信装置43050は、映像をエンコードするエンコーダ43010、エンコードされた映像及び映像に関するシグナリング情報を一つの放送ストリームに多重化する多重化部43020、多重化された放送ストリームを含む放送信号を生成する放送信号生成部43030及び/又は生成された放送信号を伝送する伝送部43040を含むことができる。ここで、シグナリング情報は、パノラマ映像に関するシグナリング情報を含むことができる。
本発明の一実施例に係るエンコーダ43010は、映像をエンコードすることができる。本発明の一実施例に係る多重化部43020は、エンコードされた映像及び/又は映像に関するシグナリング情報を一つの放送ストリームに多重化することができる。このとき、シグナリング情報は、パノラマ映像に関するシグナリング情報を含むことができる。本発明の一実施例に係る放送信号生成部43030は、多重化された放送ストリームを含む放送信号を生成することができる。本発明の一実施例に係る伝送部43040は、生成された放送信号を伝送することができる。このとき、伝送部は、地上波放送網、インターネット網及び/又はケーブル網を介して放送信号を伝送することができる。
本発明の一実施例に係るエンコーダ、多重化部、放送信号生成部及び/又は伝送部は、それぞれ上述した動作をするハードウェアに該当し得る。すなわち、本発明の一実施例に係るエンコーダ、多重化部、放送信号生成部及び/又は伝送部は、メモリに格納されている一連の指示を実行するプロセッサに該当し得る。
図44は、本発明の一実施例に係る放送信号受信装置の構成を示した図である。
本発明の一実施例に係る放送信号受信装置44040は、映像に対するストリーム及び映像に関するシグナリング情報を含む放送ストリームを受信する受信部43010、受信した放送ストリームから映像に対するストリーム及び映像に関するシグナリング情報を抽出する逆多重化部43020及び/又は抽出されたシグナリング情報を用いて抽出された映像に対するストリームをデコードするデコーダ43030を含むことができる。
本発明の一実施例に係る受信部43010は、映像に対するストリーム及び映像に関するシグナリング情報を含む放送ストリームを受信することができる。ここで、シグナリング情報は、パノラマ映像に関するシグナリング情報を含むことができる。本発明の一実施例に係る逆多重化部43020は、受信した放送ストリームから映像に対するストリーム及び映像に関するシグナリング情報を抽出することができる。本発明の一実施例に係るデコーダ43030は、抽出されたシグナリング情報を用いて抽出された映像に対するストリームをデコードすることができる。
本発明の一実施例に係る受信部、逆多重化部及び/又はデコーダは、それぞれ上述した動作をするハードウェアに該当し得る。すなわち、本発明の一実施例に係る受信部、逆多重化部及び/又はデコーダは、メモリに格納されている一連の指示を実行するプロセッサに該当し得る。
説明の便宜上、各図面を分けて説明したが、各図面に敍述されている各実施例を併合して新しい実施例を具現するように設計することも可能である。そして、当業者の必要に応じて、以前に説明した実施例を実行するためのプログラムが記録されているコンピュータで判読可能な記録媒体を設計することも本発明の権利範囲に属する。
本発明に係る装置及び方法は、上述した各実施例の構成と方法を限定的に適用するものではなく、上述した各実施例は、多様に変形できるように各実施例の全部又は一部を選択的に組み合わせて構成することもできる。
一方、本発明の映像処理方法は、ネットワークデバイスに備えられたプロセッサが読み取り可能な記録媒体にプロセッサが読み取り可能なコードとして具現することが可能である。プロセッサが読める記録媒体は、プロセッサによって読まれるデータが格納される全ての種類の記録装置を含む。プロセッサが読み取り可能な記録媒体の例としては、ROM、RAM、CDROM、磁気テープ、フロッピーディスク、光データ格納装置などがあり、また、インターネットを介した伝送などのキャリアウェーブの形態に具現されることも含む。また、プロセッサが読み取り可能な記録媒体は、ネットワークで連結されたコンピュータシステムに分散し、分散方式でプロセッサが読み取り可能なコードを格納して実行することができる。
また、以上では、本発明の好ましい実施例に対して図示して説明したが、本発明は、上述した特定の実施例に限定されるものでなく、特許請求の範囲で請求する本発明の要旨から逸脱することなく、当該発明の属する技術分野で通常の知識を有する者によって多様な変形実施が可能であることは当然であり、このような変形実施は、本発明の技術的思想や展望から個別的に理解してはならない。
そして、当該明細書では、物の発明と方法の発明を全て説明しており、必要に応じて両発明の説明を補充的に適用することができる。
発明を実施するための形態は、上述したように、発明を実施するための最善の形態で説明した。
本発明は、放送産業全般で利用可能である。

Claims (19)

  1. 映像をエンコードするステップと、
    前記エンコードされた映像及び前記映像に関するシグナリング情報を一つの放送ストリームに多重化するステップであって、前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含む、ステップと、
    前記多重化された放送ストリームを含む放送信号を生成するステップと、
    前記生成された放送信号を伝送するステップと、
    を含む、放送信号送信方法。
  2. 前記映像に関するシグナリング情報は、現在視聴中の放送サービスに対応するパノラマ放送サービスに対する情報を示すイベント連結情報を含み、前記パノラマ映像に関するシグナリング情報は、前記パノラマ映像の構成を示すパノラマ構成情報を含む、請求項1に記載の放送信号送信方法。
  3. 前記エンコードするステップは、前記映像を一つ以上の映像に分割し、前記分割された映像をそれぞれエンコードするステップを含む、請求項2に記載の放送信号送信方法。
  4. 前記エンコードするステップは、関心領域(ROI)の高画質映像を提供するために、前記映像のうちユーザのROIに関する追加情報をエンコードするステップを含み、
    前記多重化するステップは、前記エンコードされた映像、前記映像に関するシグナリング情報及び前記エンコードされたROI追加情報を一つの放送ストリームに多重化するステップを含む、請求項2に記載の放送信号送信方法。
  5. 前記パノラマ構成情報は、前記分割された映像に関する情報を含む、請求項3に記載の放送信号送信方法。
  6. 前記パノラマ構成情報は、前記分割された映像の区画化現象を除去するためのフィルタリング情報を含む、請求項3に記載の放送信号送信方法。
  7. 前記パノラマ構成情報は、前記パノラマ映像を一つ以上の映像にクロップするための情報を含む、請求項2に記載の放送信号送信方法。
  8. 前記パノラマ構成情報は、前記ROIの映像に関する情報を含む、請求項4に記載の放送信号送信方法。
  9. 映像に対するストリーム及び前記映像に関するシグナリング情報を含む放送ストリームを受信するステップであって、前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含む、ステップと、
    前記受信した放送ストリームから前記映像に対するストリーム及び前記映像に関するシグナリング情報を抽出するステップと、
    前記抽出されたシグナリング情報を用いて前記抽出された映像に対するストリームをデコードするステップと、
    を含む、放送信号受信方法。
  10. 前記映像に関するシグナリング情報は、現在視聴中の放送サービスに対応するパノラマ放送サービスに対する情報を示すイベント連結情報を含み、前記パノラマ映像に関するシグナリング情報は、前記パノラマ映像の構成を示すパノラマ構成情報を含む、請求項9に記載の放送信号受信方法。
  11. 前記映像は、一つ以上の映像に分割され、前記映像に対するストリームは、前記一つ以上の分割された映像に対するストリームを含み、
    前記デコードするステップは、前記抽出されたシグナリング情報を用いて前記分割された映像に対するストリームのそれぞれをデコードするステップを含む、請求項10に記載の放送信号受信方法。
  12. 前記放送ストリームは、関心領域(ROI)の高画質映像を提供するために、前記映像のうちユーザのROIに関する追加情報に対するストリームを含み、
    前記抽出するステップは、前記受信した放送ストリームから前記映像に対するストリーム、前記ROI追加情報に対するストリーム及び前記映像に関するシグナリング情報を抽出するステップを含み、
    前記デコードするステップは、前記抽出されたシグナリング情報を用いて前記抽出された映像に対するストリーム及び前記抽出されたROI追加情報に対するストリームをデコードするステップを含む、請求項10に記載の放送信号受信方法。
  13. 前記パノラマ構成情報は、前記分割された映像に関する情報を含む、請求項11に記載の放送信号受信方法。
  14. 前記パノラマ構成情報は、前記分割された映像の区画化現象を除去するためのフィルタリング情報を含む、請求項11に記載の放送信号受信方法。
  15. 前記パノラマ構成情報は、前記パノラマ映像を一つ以上の映像にクロップするための情報を含む、請求項10に記載の放送信号受信方法。
  16. 前記パノラマ構成情報は、前記ROIの映像に関する情報を含む、請求項12に記載の放送信号受信方法。
  17. 前記デコードされた映像に対するストリームをディスプレイするステップをさらに含み、
    前記ディスプレイするステップは、ユーザからスクローリング要求を受信する場合、前記スクローリング要求によって移動した領域をディスプレイするステップを含む、請求項9に記載の放送信号受信方法。
  18. 映像をエンコードするエンコーダと、
    前記エンコードされた映像及び前記映像に関するシグナリング情報を一つの放送ストリームに多重化する多重化部と、
    前記多重化された放送ストリームを含む放送信号を生成する放送信号生成部と、
    前記生成された放送信号を伝送する伝送部と、
    を含み、
    前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含む、放送信号送信装置。
  19. 映像に対するストリーム及び前記映像に関するシグナリング情報を含む放送ストリームを受信する受信部と、
    前記受信した放送ストリームから前記映像に対するストリーム及び前記映像に関するシグナリング情報を抽出する逆多重化部と、
    前記抽出されたシグナリング情報を用いて前記抽出された映像に対するストリームをデコードするデコーダと、
    を含み、
    前記シグナリング情報は、パノラマ映像に関するシグナリング情報を含む、放送信号受信装置。
JP2016552583A 2014-02-18 2015-02-17 パノラマサービスのための放送信号送受信方法及び装置 Active JP6382329B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201461940838P 2014-02-18 2014-02-18
US61/940,838 2014-02-18
PCT/KR2015/001606 WO2015126144A1 (ko) 2014-02-18 2015-02-17 파노라마 서비스를 위한 방송 신호 송수신 방법 및 장치

Publications (2)

Publication Number Publication Date
JP2017513280A true JP2017513280A (ja) 2017-05-25
JP6382329B2 JP6382329B2 (ja) 2018-08-29

Family

ID=53878577

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016552583A Active JP6382329B2 (ja) 2014-02-18 2015-02-17 パノラマサービスのための放送信号送受信方法及び装置

Country Status (6)

Country Link
US (2) US9894422B2 (ja)
EP (1) EP3110160A4 (ja)
JP (1) JP6382329B2 (ja)
KR (1) KR101809968B1 (ja)
CN (1) CN106031180A (ja)
WO (1) WO2015126144A1 (ja)

Families Citing this family (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3025483B1 (en) 2013-07-25 2022-09-21 Convida Wireless, LLC End-to-end m2m service layer sessions
WO2015194195A1 (en) * 2014-06-20 2015-12-23 Sharp Kabushiki Kaisha Methods for xml representation of device capabilities
CN106797499A (zh) * 2014-10-10 2017-05-31 索尼公司 编码装置和方法、再现装置和方法以及程序
US10362290B2 (en) 2015-02-17 2019-07-23 Nextvr Inc. Methods and apparatus for processing content based on viewing information and/or communicating content
KR102493754B1 (ko) 2015-02-17 2023-02-01 네버마인드 캐피탈 엘엘씨 감축된 해상도 이미지들을 생성 및 이용하고 및/또는 재생 또는 컨텐트 분배 디바이스에 이러한 이미지들을 통신하기 위한 방법들 및 장치
KR20160133867A (ko) * 2015-05-13 2016-11-23 삼성전자주식회사 멀티 디스플레이 시스템 및 멀티 디스플레이 시스템의 동작 방법
US10582125B1 (en) * 2015-06-01 2020-03-03 Amazon Technologies, Inc. Panoramic image generation from video
WO2016199608A1 (ja) * 2015-06-12 2016-12-15 ソニー株式会社 情報処理装置および情報処理方法
CN107637082B (zh) * 2015-06-12 2021-03-12 索尼公司 信息处理装置以及信息处理方法
TWI547177B (zh) * 2015-08-11 2016-08-21 晶睿通訊股份有限公司 視角切換方法及其攝影機
EP3343913B1 (en) 2015-09-30 2022-05-25 Samsung Electronics Co., Ltd. Display device and method for controlling same
US20170162230A1 (en) * 2015-12-04 2017-06-08 Livestream LLC Interactive digital camera for live crop editing and recording of video streams
US10506198B2 (en) 2015-12-04 2019-12-10 Livestream LLC Video stream encoding system with live crop editing and recording
CN105611213A (zh) * 2016-01-04 2016-05-25 京东方科技集团股份有限公司 一种图像处理方法、播放方法及相关的装置和系统
KR102157655B1 (ko) * 2016-02-17 2020-09-18 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치
US10645362B2 (en) * 2016-04-11 2020-05-05 Gopro, Inc. Systems, methods and apparatus for compressing video content
WO2017196670A1 (en) 2016-05-13 2017-11-16 Vid Scale, Inc. Bit depth remapping based on viewing parameters
US10602191B2 (en) 2016-05-13 2020-03-24 Gopro, Inc. Apparatus and methods for video compression
US10148875B1 (en) * 2016-05-17 2018-12-04 Scott Zhihao Chen Method and system for interfacing multiple channels of panoramic videos with a high-definition port of a processor
KR102535168B1 (ko) * 2016-05-26 2023-05-30 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 상호작용을 하는 클라이언트를 위한 파노라마 비디오 브로드캐스트 스트리밍
US20170347084A1 (en) * 2016-05-27 2017-11-30 Intel Corporation Virtual reality panoramic video system using scalable video coding layers
US11503314B2 (en) 2016-07-08 2022-11-15 Interdigital Madison Patent Holdings, Sas Systems and methods for region-of-interest tone remapping
KR102567002B1 (ko) 2016-08-16 2023-08-14 삼성전자주식회사 영상 표시 장치 및 그 동작방법
WO2018041244A1 (en) * 2016-09-02 2018-03-08 Mediatek Inc. Incremental quality delivery and compositing processing
WO2018079388A1 (ja) * 2016-10-25 2018-05-03 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
WO2018079389A1 (ja) * 2016-10-26 2018-05-03 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
US10932276B2 (en) 2016-11-03 2021-02-23 Convida Wireless, Llc Frame structure in NR
WO2018093851A1 (en) * 2016-11-17 2018-05-24 Intel Corporation Suggested viewport indication for panoramic video
WO2018101514A1 (ko) * 2016-12-01 2018-06-07 엘지전자 주식회사 영상표시장치, 및 이를 구비하는 영상표시 시스템
US20180176468A1 (en) * 2016-12-19 2018-06-21 Qualcomm Incorporated Preferred rendering of signalled regions-of-interest or viewports in virtual reality video
US10560682B2 (en) * 2017-01-13 2020-02-11 Gopro, Inc. Methods and apparatus for providing a frame packing arrangement for panoramic content
EP3583780B1 (en) 2017-02-17 2023-04-05 InterDigital Madison Patent Holdings, SAS Systems and methods for selective object-of-interest zooming in streaming video
JP7212611B2 (ja) * 2017-02-27 2023-01-25 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像配信方法、画像表示方法、画像配信装置及び画像表示装置
US11272237B2 (en) 2017-03-07 2022-03-08 Interdigital Madison Patent Holdings, Sas Tailored video streaming for multi-device presentations
US10609283B2 (en) * 2017-04-01 2020-03-31 Intel Corporation Sharing panoramic video images over a wireless display session
CN107018370B (zh) * 2017-04-14 2020-06-30 威盛电子股份有限公司 用于视频墙的显示方法及其系统
US11049219B2 (en) 2017-06-06 2021-06-29 Gopro, Inc. Methods and apparatus for multi-encoder processing of high resolution content
WO2018225449A1 (ja) * 2017-06-09 2018-12-13 ソニーセミコンダクタソリューションズ株式会社 映像送信装置および映像受信装置
US10679415B2 (en) * 2017-07-05 2020-06-09 Qualcomm Incorporated Enhanced signaling of regions of interest in container files and video bitstreams
KR102336997B1 (ko) * 2017-08-16 2021-12-08 삼성전자 주식회사 서버, 디스플레이장치 및 그 제어방법
WO2019066191A1 (ko) * 2017-09-28 2019-04-04 엘지전자 주식회사 스티칭 및 리프로젝션 관련 메타데이터를 이용한 6dof 비디오를 송수신하는 방법 및 그 장치
CN108307219B (zh) * 2017-11-07 2020-12-01 深圳市佳创视讯技术股份有限公司 一种高清电视全景视频智能展示方法
CN111373760A (zh) * 2017-11-30 2020-07-03 索尼公司 发送设备、发送方法、接收设备和接收方法
US10798455B2 (en) 2017-12-22 2020-10-06 Comcast Cable Communications, Llc Video delivery
US10390063B2 (en) 2017-12-22 2019-08-20 Comcast Cable Communications, Llc Predictive content delivery for video streaming services
EP3739889A4 (en) * 2018-01-12 2020-11-25 Sony Corporation TRANSMISSION DEVICE, TRANSMISSION PROCESS, RECEIVING DEVICE AND RECEPTION PROCESS
CN111567039B (zh) 2018-02-27 2022-06-03 Lg电子株式会社 用于发送和接收包括相机镜头信息的360度视频的方法及其装置
KR102648468B1 (ko) * 2018-04-10 2024-03-18 에스케이텔레콤 주식회사 레벨 설정 방법 및 이를 이용한 영상 복호화 장치
WO2019199025A1 (ko) 2018-04-09 2019-10-17 에스케이텔레콤 주식회사 영상을 부호화/복호화하는 방법 및 그 장치
US11509937B2 (en) 2018-04-09 2022-11-22 Sk Telecom Co., Ltd. Method and apparatus for encoding/decoding video
CN108566553B (zh) * 2018-04-25 2020-12-04 威盛电子股份有限公司 视频墙媒体播放系统、方法及控制服务器
US10666863B2 (en) * 2018-05-25 2020-05-26 Microsoft Technology Licensing, Llc Adaptive panoramic video streaming using overlapping partitioned sections
US10764494B2 (en) 2018-05-25 2020-09-01 Microsoft Technology Licensing, Llc Adaptive panoramic video streaming using composite pictures
KR20210066856A (ko) 2018-09-27 2021-06-07 콘비다 와이어리스, 엘엘씨 새로운 라디오의 비허가 스펙트럼들에서의 부대역 동작들
US11228781B2 (en) 2019-06-26 2022-01-18 Gopro, Inc. Methods and apparatus for maximizing codec bandwidth in video applications
US11481863B2 (en) 2019-10-23 2022-10-25 Gopro, Inc. Methods and apparatus for hardware accelerated image processing for spherical projections
USD996493S1 (en) 2020-12-07 2023-08-22 Applied Materials, Inc. Live streaming camera

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328204A (ja) * 2003-04-23 2004-11-18 Canon Inc 映像信号処理装置
JP2009010943A (ja) * 2007-06-26 2009-01-15 Mitsubishi Electric Research Laboratories Inc 画像の逆トーンマッピングの方法とシステム、および画像の逆トーンマッピングを実行するコーデック
JP2009510888A (ja) * 2005-09-26 2009-03-12 韓國電子通信研究院 スケーラブルビデオ符号化でroiを定義し、再構成するための装置および方法
JP2009147893A (ja) * 2007-11-20 2009-07-02 Sony Corp 情報処理装置、情報処理方法、表示制御装置、表示制御方法、およびプログラム
JP2011234065A (ja) * 2010-04-27 2011-11-17 Nec Corp 動画像通信システム
WO2012111325A1 (ja) * 2011-02-17 2012-08-23 パナソニック株式会社 映像符号化装置、映像符号化方法、映像符号化プログラム、映像再生装置、映像再生方法及び映像再生プログラム
WO2013150945A1 (ja) * 2012-04-06 2013-10-10 ソニー株式会社 画像処理装置および方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5130794A (en) * 1990-03-29 1992-07-14 Ritchey Kurtis J Panoramic display system
US6859557B1 (en) * 2000-07-07 2005-02-22 Microsoft Corp. System and method for selective decoding and decompression
JP2003115050A (ja) * 2001-10-04 2003-04-18 Sony Corp 映像データ処理装置及び映像データ処理方法、データ配信装置及びデータ配信方法、データ受信装置及びデータ受信方法、記憶媒体、並びにコンピュータ・プログラム
KR100475060B1 (ko) * 2002-08-07 2005-03-10 한국전자통신연구원 다시점 3차원 동영상에 대한 사용자 요구가 반영된 다중화장치 및 방법
WO2005055607A1 (en) * 2003-12-08 2005-06-16 Electronics And Telecommunications Research Institute System and method for encoding and decoding an image using bitstream map and recording medium thereof
KR100703715B1 (ko) 2005-05-17 2007-04-06 한국전자통신연구원 다시점 3차원 동영상 송수신 시스템
JP2011514789A (ja) 2008-03-20 2011-05-06 インスティテュート フュール ラントファンクテクニーク ゲー・エム・ベー・ハー ビデオ画像の小さな画面サイズへの適合方法
US8274544B2 (en) * 2009-03-23 2012-09-25 Eastman Kodak Company Automated videography systems
WO2010117129A2 (en) 2009-04-07 2010-10-14 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3d video data processing method thereof
US20100329361A1 (en) 2009-06-30 2010-12-30 Samsung Electronics Co., Ltd. Apparatus and method for in-loop filtering of image data and apparatus for encoding/decoding image data using the same
KR101487944B1 (ko) * 2010-02-24 2015-01-30 아이피플렉 홀딩스 코포레이션 시각 장애인들을 지원하는 증강 현실 파노라마
KR20120026013A (ko) 2010-09-08 2012-03-16 한국전자통신연구원 통신 시스템에서 데이터 송수신 장치 및 방법
EP2661080A4 (en) * 2010-12-31 2016-06-29 Korea Electronics Telecomm METHOD FOR CODING VIDEO INFORMATION AND METHOD FOR DECODING VIDEO INFORMATION AND DEVICE THEREFOR
KR101869103B1 (ko) 2011-01-26 2018-06-19 한국전자통신연구원 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템
JP5906462B2 (ja) * 2011-02-16 2016-04-20 パナソニックIpマネジメント株式会社 映像符号化装置、映像符号化方法、映像符号化プログラム、映像再生装置、映像再生方法及び映像再生プログラム
EP2689583B1 (en) * 2011-03-21 2016-11-30 Intel Corporation Panorama picture scrolling
KR101685418B1 (ko) * 2011-04-27 2016-12-12 한화테크윈 주식회사 3차원 영상을 생성하는 감시 시스템
WO2012157999A2 (ko) 2011-05-19 2012-11-22 엘지전자 주식회사 비디오 스트림 전송 장치, 비디오 스트림 수신 장치, 비디오 스트림 전송 방법 및 비디오 스트림 수신 방법
WO2013027408A1 (ja) * 2011-08-24 2013-02-28 パナソニック株式会社 記録媒体、再生装置、記録装置、及び記録方法
KR20130077246A (ko) 2011-12-29 2013-07-09 주식회사 카몬 스마트디바이스 상에서 파노라마 동영상 재생시 cpu에 의한 과도 처리 경감방법 및 과도 처리 경감시스템

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328204A (ja) * 2003-04-23 2004-11-18 Canon Inc 映像信号処理装置
JP2009510888A (ja) * 2005-09-26 2009-03-12 韓國電子通信研究院 スケーラブルビデオ符号化でroiを定義し、再構成するための装置および方法
JP2009010943A (ja) * 2007-06-26 2009-01-15 Mitsubishi Electric Research Laboratories Inc 画像の逆トーンマッピングの方法とシステム、および画像の逆トーンマッピングを実行するコーデック
JP2009147893A (ja) * 2007-11-20 2009-07-02 Sony Corp 情報処理装置、情報処理方法、表示制御装置、表示制御方法、およびプログラム
JP2011234065A (ja) * 2010-04-27 2011-11-17 Nec Corp 動画像通信システム
WO2012111325A1 (ja) * 2011-02-17 2012-08-23 パナソニック株式会社 映像符号化装置、映像符号化方法、映像符号化プログラム、映像再生装置、映像再生方法及び映像再生プログラム
WO2013150945A1 (ja) * 2012-04-06 2013-10-10 ソニー株式会社 画像処理装置および方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Z. G. LI ET AL.: "Region-of-Interest Based Local Tone Mappings", 2011 6TH IEEE CONFERENCE, JPN6018024997, 21 June 2011 (2011-06-21), US, pages 1553 - 1559, XP032006268, ISSN: 0003830414, DOI: 10.1109/ICIEA.2011.5975837 *

Also Published As

Publication number Publication date
US20180115806A1 (en) 2018-04-26
KR20160094384A (ko) 2016-08-09
WO2015126144A1 (ko) 2015-08-27
US20160337706A1 (en) 2016-11-17
JP6382329B2 (ja) 2018-08-29
EP3110160A1 (en) 2016-12-28
EP3110160A4 (en) 2017-10-11
CN106031180A (zh) 2016-10-12
KR101809968B1 (ko) 2017-12-18
US9894422B2 (en) 2018-02-13

Similar Documents

Publication Publication Date Title
JP6382329B2 (ja) パノラマサービスのための放送信号送受信方法及び装置
US10091486B2 (en) Apparatus and method for transmitting and receiving digital broadcasting signal
US9554198B2 (en) Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same
US9036700B2 (en) Simulcast of stereoviews for 3D TV
US10057633B2 (en) Method and apparatus for transmitting and receiving ultra high-definition broadcasting signal for expressing high-quality color in digital broadcasting system
JP6309650B2 (ja) 信号送受信装置及び信号送受信方法
US20160269711A1 (en) Method and apparatus for processing 3-dimensional broadcasting signal
US9894407B2 (en) Apparatus for transreceiving signals and method for transreceiving signals
US20180213216A1 (en) Media data transmission device, media data reception device, media data transmission method, and media data rececption method
RU2633385C2 (ru) Передающее устройство, способ передачи, приемное устройство, способ приема и способ отображения приема
JP6261741B2 (ja) デジタル放送システムにおける高画質uhd放送コンテンツの送受信方法及び装置
US20110273532A1 (en) Apparatus and method of transmitting stereoscopic image data and apparatus and method of receiving stereoscopic image data
JP2012039340A (ja) 受信装置および受信方法
US20160057488A1 (en) Method and System for Providing and Displaying Optional Overlays
US11936936B2 (en) Method and system for providing and displaying optional overlays
KR20150122130A (ko) 신호 송수신 장치 및 신호 송수신 방법
KR20150037200A (ko) 비디오 스트림 송/수신 장치 및 비디오 스트림 송/수신 방법
JP5684415B2 (ja) デジタル放送信号受信装置およびデジタル放送信号受信方法
KR20120036255A (ko) 디지털 방송에 있어서 3차원 비디오 서비스 관련 정보 전송 방법
KR20150086801A (ko) 화질 향상을 위한 부가 영상 데이터 송신 및 수신 방법 및 장치

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180131

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180703

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180801

R150 Certificate of patent or registration of utility model

Ref document number: 6382329

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250